Data Engineer mit Databricks und Azure (w/m/d)
Unser Kunde ist eines der größten IT-Dienstleistungsunternehmen Österreichs und das Software-Haus einer führenden Bankengruppe.
Must haves
- Databricks
- Python
Nice to have
- Microsoft Azure
- Java
Gesuchter Bereich
- DWH / BI - {Data Warehouse / Business Intelligence (sonstiges)}
Deine Aufgaben
-
Entwicklung und Migration von Datenpipelines auf Databricks (Python/PySpark)
-
Anbindung und Verarbeitung von Streaming-Daten über Azure Event Hub und Kafka
-
Umsetzung und Übernahme von Realtime-Verarbeitungsstrecken (Apache Druid, Apache Storm)
-
Aufbau und Betrieb von Datenmodellen und Workloads auf der Azure-Datenplattform
-
Analyse bestehender Lösungen und Legacy-Code (Java) als Grundlage der Migration
-
Mitarbeit im agilen Scrum-Prozess (Refinement, Planning, Review)
-
Automatisierung und Qualitätssicherung über CI/CD, DevOps und DataOps
Anforderungen
-
Fundierte Erfahrung als Data Engineer mit Schwerpunkt Databricks und Python
-
Praxiserfahrung mit Streaming-Technologien (Azure Event Hub, Kafka) und Realtime-Technologien (Apache Druid, Apache Storm)
-
Erfahrung in der Entwicklung und Migration von Datenpipelines
-
Sehr gute Kenntnisse im Umgang mit cloudbasierten Datenplattformen, idealerweise Microsoft Azure
-
Java-Kenntnisse zur Analyse bestehender Lösungen und Legacy-Code von Vorteil
-
Von Vorteil: Erfahrung im Bereich Webanalytics, CI/CD, DevOps und DataOps
-
Von Vorteil: Erfahrung in Migrationsprojekten und agilen Arbeitsmethoden (Scrum)
-
Englisch erforderlich, Deutsch von Vorteil
Unsere Xtra Vorteile
- Seit über 20 Jahren spezialisiert auf IT-Recruitment
- Zugang zu einem weitreichenden Talentepool
- Individuelle Beratung.