Data Engineer (m/w/d)

Unser Kunde zählt zu den führenden Banken Deutschlands und ist ein innovatives, internationales sowie nachhaltiges Unternehmen im Finanzsektor. Als verlässliche Bank versteht es das Unternehmen, sich kontinuierlich zu verändern. Digitalisierung, Agilität und Effizienz sind nicht nur Schlagworte, sondern prägen die ständige Entwicklung des Unternehmens. In der modernen IT-Abteilung des Unternehmens bieten sich vielfältige Entwicklungsmöglichkeiten. Das Team im Kompetenzpool Development 2 realisiert spannende Projekte im Bereich Data Management und Data Analytics, um den wertschöpfenden Einsatz von Daten zu ermöglichen. Gesucht werden motivierte Kolleg:innen mit Gestaltungswillen, die sich für Software Engineering mit Schwerpunkt auf der Databricks-Plattform und Data Engineering begeistern. In dieser Rolle als Data Engineer treiben Sie die Weiterentwicklung im Bereich Datenintegration und -analyse voran, um zukünftige Anforderungen effizient umsetzen zu können und gleichzeitig Stabilität und Performance hochzuhalten. Sie werden Teil eines dynamischen Teams, das sowohl interne als auch externe Kollegen umfasst, und begleiten Anforderungen vom Lösungsdesign bis zur Implementierung. Zu Ihren Aufgaben gehört die Entwicklung und der Betrieb skalierbarer Datapipelines auf der Databricks-Plattform sowie die Integration von Daten aus verschiedenen Quellen. Darüber hinaus gestalten Sie die Lakehouse-Architektur und modellieren robuste Datenstrukturen für Reporting, Analytics und KI-/ML-Anwendungen. Sie stellen die Datenqualität, Sicherheit und Compliance sicher und gestalten die Integration von Microsoft Fabric und Power BI in die Data Management & Analytics Plattform.

Der ideale Kandidat hat ein abgeschlossenes Studium der Informatik, (Wirtschafts-)Informatik, Medieninformatik oder einer vergleichbaren Fachrichtung und bringt mindestens 5 Jahre IT-Projekterfahrung mit. Mehrjährige praktische Erfahrung als Data Engineer oder Big-Data-Engineer mit Azure Databricks, Apache Spark und Delta Lake ist erforderlich. Exzellente Kenntnisse in Python, Spark/PySpark und SQL sowie fundierte Erfahrung im verteilten Rechnen auf Databricks sind ebenfalls notwendig. Darüber hinaus sollten Sie über gute konzeptionelle und architektonische Fähigkeiten verfügen, insbesondere in der Modellierung und Implementierung von ETL-/ELT-Prozessen sowie von Data-Lakehouse-Architekturen. Mehrjährige Erfahrung in der Terraform-Entwicklung, in der Arbeit mit Azure DevOps und im Berechtigungsmanagement mit Microsoft Entra ID sind von Vorteil. Erfahrung mit Microsoft Fabric und Power BI, insbesondere im Zusammenspiel mit Lakehouse-Architekturen, ist ebenfalls wünschenswert. Persönlich zeichnen Sie sich durch hohe Umsetzungskompetenz, Teamorientierung und einen guten Sinn für Humor aus. Sehr gute Deutschkenntnisse in Wort und Schrift sind erforderlich.