Unser Kunde ist eine der führenden Banken Deutschlands und bietet ein innovatives, internationales sowie nachhaltiges Arbeitsumfeld im Finanzsektor. Die Digitalisierung, Agilität und Effizienz sind zentrale Aspekte der Unternehmensphilosophie, die es den Mitarbeitenden ermöglichen, sich kontinuierlich weiterzuentwickeln. In der IT-Abteilung erwartet Sie ein dynamisches Team, das an spannenden Projekten im Bereich Data Management und Data Analytics arbeitet. Als Data Engineer werden Sie aktiv an der Weiterentwicklung der Datenintegration und -analyse mitwirken, um zukünftige Anforderungen effizient umzusetzen und die Stabilität sowie Performance der Systeme zu gewährleisten. Zu Ihren Aufgaben gehört die Entwicklung und der Betrieb skalierbarer Datapipelines auf der Databricks-Plattform sowie die Integration von Daten aus verschiedenen Quellen. Sie gestalten die Lakehouse-Architektur und modellieren robuste Datenstrukturen für Reporting und Analytics. Darüber hinaus stellen Sie die Datenqualität und Compliance sicher und arbeiten an der Integration von Microsoft Fabric und Power BI in die bestehende Plattform. Ihr Engagement und Ihre Ideen sind gefragt, um den produktiven Betrieb der Plattform zu optimieren und kontinuierliche Verbesserungen voranzutreiben.
Data Engineer (m/w/d)
Beschreibung
Anforderungen
Der ideale Kandidat verfügt über ein abgeschlossenes Studium in Informatik, (Wirtschafts-)Informatik oder einer vergleichbaren Fachrichtung sowie mindestens fünf Jahre Erfahrung in IT-Projekten. Sie bringen mehrjährige praktische Erfahrung als Data Engineer oder Big-Data-Engineer mit, insbesondere mit Azure Databricks, Apache Spark und Delta Lake. Exzellente Kenntnisse in Python, Spark/PySpark und SQL sind unerlässlich, ebenso wie fundierte Erfahrungen im verteilten Rechnen auf Databricks. Sie sollten über sehr gute konzeptionelle und architektonische Fähigkeiten verfügen, insbesondere in der Modellierung und Implementierung von ETL-/ELT-Prozessen sowie von Data-Lakehouse-Architekturen. Erfahrung in der Terraform-Entwicklung und der Arbeit mit Azure DevOps ist ebenfalls erforderlich. Ein hohes Maß an Teamorientierung, Umsetzungskompetenz und ein guter Sinn für Humor runden Ihr Profil ab. Sehr gute Deutschkenntnisse in Wort und Schrift sind notwendig.