Job
In dieser Rolle entwickelst du automatisierte Datenpipelines, optimierst Datenverarbeitungsprozesse und implementierst moderne Datenarchitekturen für Batch- und Streaming-Daten auf hybriden Plattformen.
Job-Technologien
Deine Rolle im Team
- Pipeline-Entwicklung: Du entwickelst und wartest automatisierte Data-Ingestion-Pipelines und stellst die zuverlässige Verarbeitung von Batch- und Streaming-Daten sicher.
- Mitarbeit an der Plattform: Du unterstützt beim Ausbau moderner, hybrider Datenplattformen (z. B. auf Basis von Spark/Databricks oder vergleichbaren Technologien) und implementierst Features für moderne Datenarchitekturen (Lakehouse & DWH).
- Data Quality: Du setzt Schema-Validierungen und Datenqualitätsprüfungen während des Ingestion-Prozesses um und unterstützt bei der Metadatenextraktion.
- Governance-Support: Du arbeitest an der Umsetzung von Zugriffskontrollen und Datenversionierungen mit, um die Reproduzierbarkeit von Datensätzen zu gewährleisten.
- Performance-Support: Du unterstützt bei der Optimierung von Datenverarbeitungsprozessen und hilfst dabei, unnötige Datenbewegungen im System zu minimieren.
- Wachstum: In Zusammenarbeit mit unseren Seniors vertiefst Du Dein Wissen in verteilten Systemen, MLOps-Tooling und modernen Lakehouse-Designs.
Unsere Erwartungen an dich
Ausbildung
- Sehr gute Deutsch- und Englischkenntnisse sowie ein abgeschlossenes Studium im Bereich Informatik, Data Engineering oder vergleichbar.
Qualifikationen
- Programmierung: Gute Kenntnisse in Python sowie ein sicherer Umgang mit relationalen Datenbanken (SQL).
- Cloud-Basis: Grundverständnis von Cloud-Technologien (Azure oder AWS) und ersten Kontakt zu Docker.
- Versionierung: Sicherer Umgang mit Git und Verständnis für Data Lineage Konzepte.
- Sehr gute Kenntnisse: Grundverständnis von automatisierten Workflows und Deployments.
- Datenmodellierung: Wissen über Partitionierung und grundlegende Architekturprinzipien von Data Lakes.
- Datenmodellierung: Grundverständnis für dimensionale Datenmodellierung (Star/Snowflake Schema) und Architekturprinzipien von Data Lakes.
- Lernbereitschaft: Du hast eine hohe Motivation, Dich in die rasant entwickelnde Data- und AI-Landschaft einzuarbeiten.
- Team-Spirit: Du arbeitest gerne kooperativ mit Engineering- und Analytics-Teams zusammen.
- Strukturierte Arbeitsweise: Du gehst Aufgaben methodisch an und hast ein Auge für Datenintegrität.
Erfahrung
- Solide Kenntnisse: Erste praktische Erfahrung mit Distributed Computing (z. B. Spark/Databricks oder vergleichbare Technologien) und dem Aufbau von Daten-Pipelines.
- Qualitätsanspruch: Erfahrung mit Testing-Verfahren für Datenprozesse und Clean Code Standards.
Benefits
Work-Life-Integration
Essen & Trinken
Gesundheit, Fitness & Fun
Themen, mit denen du dich im Job beschäftigst
Job-Standorte
Das ist dein Arbeitgeber
Die BCM Solutions GmbH steht für hochwertige Softwarelösungen und Dienstleistungen im Bereich der Softwareentwicklung.
- Digitale Agentur
- Onsite, Hybrid, Full Remote
- Internet, IT, Telekom
Arbeitgeber-Reviews
- Engineering
- 3,3
- Arbeitsbedingungen
- 4,1
- Teamkultur
- 4,1
- Karriere
- 4,3
Weitere Jobs
Diese Jobs könnten dich auch interessieren
Hallo, lass uns WIR sagen! Wir - die HUK-COBURG Versicherungsgruppe - zählen zu den 10 größten in Deutschland. Vor über 90 Jahren gegründet sind wir mit über 13 Millionen Kund:innen heute der große Versicherer für Privathaushalte und der größte deutsche...
Die Rolle Als Forward Deployed AI Engineer gehst du direkt in unseren Fachbereichen, verstehst die Abläufe und baust produktionsreife AI und Automatisierungs-Lösungen, die die Arbeitsweise der gesamten GGW-Gruppe grundlegend verändern werden. Du...
Berater & Projektleiter in einem – Du bist die erste Ansprechperson für unsere Kunden und übernimmst die Leitung neuer Projekte. Prozesse optimieren & Mehrwert schaffen – Mit deiner Expertise gestaltest du effizientere Abläufe und unterstützt unsere...
