Data Engineer Datenplattform

In der Produktgruppe "Kundendaten & CRM" der EDEKA IT sind wir für die Datenverarbeitung des EDEKA Verbunds zuständig. Bei uns werden unter anderem die Stammdaten und Kundendaten des EDEKA Verbunds aufbereitet und strukturiert, um sie unseren Fachbereichen zur Verfügung zu stellen.

Als Data Engineer für die EDEKA Datenplattform spielst du eine zentrale Rolle bei der Entwicklung unserer Datenprodukte. Du bist verantwortlich für die kontinuierliche Weiterentwicklung unserer kuratierten Datenschichten sowie für die Ingres- und Export-Prozesse.

Außerdem sorgst du durch gezielte Qualitätssicherung dafür, dass wir einen möglichst störungsarmen Betrieb gewährleisten können.

Dein Beitrag ist entscheidend, um sicherzustellen, dass EDEKA über gut strukturierte Daten mit hoher Datenqualität verfügt.

Folgendes gehört dabei zu deinen regelmäßigen Aufgaben:

• Entwicklung und Optimierung in der Domäne "Kundendaten & Coupons" oder "Transaktions- & Stammdaten" in unserer Azure- / Databricks-Datenplattform: Verantwortlich für die Entwicklung und Wartung von Datenprodukten, -architekturen und -pipelines.
• Aufbau und Pflege von Datenintegrationsprozessen, um sicherzustellen, dass Daten aus verschiedenen Quellen konsistent und zugänglich sind.
• Intensive Zusammenarbeit im Entwicklungsteam und mit dem Product Owner, um sicherzustellen, dass technische Anforderungen erfüllt und die Produktziele erreicht werden.
• Überwachung und Einhaltung von Data-Governance-Standards, sodass die Datenverarbeitungsprozesse den festgelegten Governance- und Sicherheitsstandards entsprechen.
• Kontinuierliche Evaluierung und Optimierung der Dateninfrastruktur basierend auf Nutzerfeedback und eigenen Datenanalysen, um die Effizienz und Qualität der Datenprozesse zu steigern.