Apache Spark Job in Münster (Hessen)

1 Stellenangebot gefunden.

  • Cloud Data Engineer

    S&N Invent GmbHMünster (Hessen)

    • Hybrid
    • Vollzeit

    In dieser Rolle entwickelst du Lösungen zur effizienten Speicherung und Verarbeitung von Daten in Cloud-Umgebungen und implementierst Datenverarbeitungs-Pipelines mit Python und Spark für komplexe Datensätze.

    • Apache Kafka
    • Apache Spark
    • Hadoop
    • Cloudera CDH
    • Python
    • AWS
    • Azure
    • MongoDB
    • Google Cloud Platform
    • +10

Neue Apache Spark Job in Münster (Hessen) per E-Mail erhalten.

Verpasste IT- und Entwickler-Jobs

  • Enterprise Architect Datamanagement

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe, Aschheim

    • Hybrid
    • Teilzeit / Vollzeit
    • Senior

    In dieser Rolle konzipierst du dezentrale Datenarchitekturen und etablierst "Data as a Product", während du Teams zu Governance und Datenflüssen berätst und Data Quality Frameworks implementierst.

    • Apache Spark
  • Software Engineer Data Integration Hub

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Position entwickelst du Backendservices für unsere Data-Mesh Plattform, integrierst Third-Party Applikationen und arbeitest an der Verbesserung der Data Quality in einem agilen Team.

    • Java
    • Amazon S3
    • Spring Boot
    • JIRA
    • Confluence
    • Trino
    • Apache Spark
    • SQL
    • Git
    • Kubernetes
    • +9
    • +10
  • Data Engineer

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Rolle entwickelst du Datenintegrationsprozesse (ETL), designst Datenmodelle für Business Analytics und Machine Learning, und arbeitest aktiv im agilen Team an innovativen Big Data Lösungen.

    • Python
    • SQL
    • Apache Spark
    • Apache Kafka
    • Amazon S3
    • OpenShift
    • +2
    • +3
  • Data Engineer

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Position gestaltest du die Datenintegration und ETL-Prozesse für Business Analytics und Machine Learning, arbeitest eng im agilen Team und entwickelst innovative Lösungen in einer modernen Big-Data-Umgebung.

    • Apache Kafka
    • Python
    • SQL
    • OpenShift
    • Amazon S3
    • Apache Spark
    • +2
    • +3
  • Cloud Data Engineer

    Verpasst

    ORDIX AGMünster (Hessen)

    • Hybrid
    • Vollzeit

    In diesem Job entwickelst du Datenlösungen und optimierst Dateninfrastrukturen in modernen Cloud-Architekturen und baust containerbasierte Analytics-Plattformen, während du eng mit Fachabteilungen zusammenarbeitest.

    • Azure
    • NiFi
    • Google Cloud Platform
    • Java
    • GitLab
    • JIRA
    • Git
    • Hadoop
    • Apache Spark
    • Kubernetes
    • +13
  • DevOps Engineer Big Data

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Rolle automatisierst du die Datenbewirtschaftung und überwachst Prozesse in unserer Data Lakehouse-Umgebung unter Verwendung von Technologien wie OpenShift, S3 und Databricks. Du entwickelst Softwarearchitekturen und kümmerst dich um Incident-Management im 2nd-Level-Sup

    • Amazon S3
    • Confluence
    • OpenShift
    • JIRA
    • Linux
    • Terraform
    • Git
    • Apache Spark
    • +4
    • +5
  • Data Engineer

    Verpasst

    DMI GmbH & Co. KGMünster (Hessen), Münster

    • Hybrid
    • Vollzeit

    In dieser Rolle entwickelst du eine skalierbare Datenplattform und bist verantwortlich für die Erstellung von Datenpipelines, Datenarchitekturen sowie die Implementierung von ETL-Prozessen unter Nutzung modernster Technologien.

    • R
    • Apache Spark
    • C#
    • Dagster
    • Python
    • MS SQL-Server
    • Amazon S3
    • Airbyte
    • Airflow
    • +4
    • +5
  • Cloud Data Engineer

    Verpasst

    S&N Invent GmbHMünster (Hessen), Münster

    • Hybrid
    • Vollzeit

    In dieser Position entwickelst du technische Lösungen zur effizienten Speicherung und Verarbeitung von Daten in Cloud-Umgebungen und gestaltest leistungsstarke Datenpipelines mit Python, Spark und Container-Technologien.

    • AWS
    • Hadoop
    • Java
    • MongoDB
    • Apache Spark
    • Apache Kafka
    • Python
    • Azure
    • Google Cloud Platform
    • SQL
    • +7
  • Machine Learning Engineer

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Position entwickelst du Machine-Learning-Modelle zur Optimierung des Software Development Lifecycle, integrierst KI-Agenten und baust robuste Datenpipelines zur Effizienzsteigerung des gesamten Entwicklungsprozesses.

    • scikit-learn
    • Python
    • PyTorch
    • SQL
    • Pandas
    • TensorFlow
    • Apache Spark
    • +3
    • +4
  • Senior Data Engineer - Data Platform Architecture

    Verpasst

    E.ONMünster (Hessen), Hamburg, Helmstedt +3

    • Hybrid
    • Vollzeit
    • Senior

    In dieser Position kümmerst du dich um die Datenintegration und den ETL-Prozess innerhalb der iPEN-Plattform, entwickelst effiziente Pipelines und unterstützt andere Data Engineers in ihrem Codebeitrag.

    • Azure Databricks
    • SQL
    • Azure Data Factory
    • Apache Spark
    • Python
    • Scala
    • +3
    • +4
  • Business Analyst Datenversorgung

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe, Aschheim

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Position entwickelst du Fachkonzepte und Testfälle für die Produkte EGP und VR-Control, stimmst Anforderungen ab und begleitest den Entwicklungsprozess, um die Datenversorgung kontinuierlich zu optimieren.

    • Java
    • Microsoft Office
    • Apache Spark
    • JIRA
    • Trino
    • Confluence
    • Airflow
    • SQL
    • Amazon S3
    • +5
    • +6
  • MLOps Engineer CI / CD & Inference Services

    Verpasst

    Sparkassen-Finanzportal GmbHMünster (Hessen), Frankfurt am Main, Hannover

    • Hybrid
    • Vollzeit
    • Senior

    In dieser Rolle automatisierst du mit Jenkins und GitHub Actions CI/CD-Pipelines, orchestrierst Containeranwendungen in Kubernetes und entwickelst REST-APIs zur Steuerung von KI-Modellen und deren Deployment.

    • Kubernetes
    • ArgoCD
    • GitLab CI
    • Flask
    • Helm
    • Github Actions
    • Jenkins
    • Docker
    • Python
    • FastAPI
    • +7
    • +8
  • Business Analytics Engineer mit Data Science Fokus

    Verpasst

    Atruvia AGMünster (Hessen), Münster

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Rolle entwickelst du leistungsstarke BI-Lösungen, erstellst interaktive Dashboards in Cognos und integrierst moderne Data Science Methoden, während du effiziente Datenpipelines mit Hilfe von Delta Lake, Spark und Airflow orchestrierst.

    • Python
    • JavaScript
    • SQL
    • Cognos
    • Apache Spark
    • Delta Lake
    • HTML
    • Airflow
    • CSS
    • +5
  • DevOps Engineer Big Data

    Verpasst

    Atruvia AGMünster (Hessen), Karlsruhe

    • Hybrid
    • Teilzeit / Vollzeit

    In dieser Rolle gestaltest du die Transformation unserer Big-Data-Analytics-Welt in ein KI- und Cloud-Umfeld, automatisierst Datenbewirtschaftung und überwachst Prozesse, während du in einem crossfunktionalen Team arbeitest.

    • Amazon S3
    • Linux
    • Terraform
    • OpenShift
    • JIRA
    • Confluence
    • Apache Spark
    • Git
    • +5