Data Engineer (m/w/d) - Data Exchange & Automation Hub

Unser Kunde ist ein führender Lebensmitteleinzelhändler mit einer langen Tradition und einer Mission, qualitativ hochwertige Produkte zu niedrigen Preisen anzubieten. In der Rolle des Data Engineers sind Sie verantwortlich für das Design und die Entwicklung technischer Lösungen sowie Richtlinien und Prozesse für eine internationale Data Analytics Plattform auf Azure. Zu Ihren täglichen Aufgaben gehört der Aufbau und die Wartung von CI/CD-Pipelines für Daten-Workflows und Plattformkomponenten mithilfe von Azure DevOps. Sie führen robuste Tests, Validierungen und Qualitätssicherungsmaßnahmen durch und sind an der kontinuierlichen Weiterentwicklung der Datenplattform beteiligt. Dabei entwickeln Sie nützliche Komponenten, erweitern Automatisierungen und implementieren Infrastructure-as-Code. Ein weiterer wichtiger Aspekt Ihrer Rolle ist die Sicherstellung eines stabilen Betriebs der entwickelten Lösungen durch proaktives Monitoring und effektives Debugging. Sie evaluieren neue Tools und Features und führen Proof-of-Concepts durch. In einem agilen Scrum-Umfeld arbeiten Sie eng mit anderen Data Engineers zusammen, unterstützen und mentorieren diese. Ihr Arbeitsumfeld ist modern und bietet Ihnen die Möglichkeit, Ihre Fähigkeiten in einem dynamischen Team weiterzuentwickeln.

Der ideale Kandidat hat ein erfolgreich abgeschlossenes Studium im MINT-Bereich oder eine vergleichbare Qualifikation sowie mindestens 5 Jahre Berufserfahrung im Bereich Data Engineering oder in einem vergleichbaren Bereich. Sie verfügen über Erfahrung im Aufbau skalierbarer Datenpipelines mit Technologien wie Spark, SQL oder ähnlichen. Ein fundiertes Verständnis von Data Lakes, Lakehouse-Architekturen und Distributed Processing ist ebenfalls erforderlich. Zudem haben Sie Erfahrung in der Implementierung von CI/CD-Prozessen mit Tools wie Azure DevOps oder GitHub Actions in Verbindung mit Terraform, Bicep oder vergleichbaren Technologien. Kenntnisse in Cloud-Plattformen wie Azure, AWS oder GCP sowie in Speicherdiensten wie ADLS oder S3 sind von Vorteil. Sie sollten auch Erfahrung im Design und in der Orchestrierung automatisierter Daten-Workflows und in der Softwareentwicklung mit Python oder einer vergleichbaren Programmiersprache mitbringen. Eine strukturierte, selbstständige, team- und lösungsorientierte Arbeitsweise sowie fließende Deutsch- und Englischkenntnisse sind unerlässlich. Zertifizierungen in den Bereichen Cloud, Data oder Analytics sind von Vorteil.