Senior Dateningenieur

Mein Kunde sucht einen erfahrenen Senior Data Engineer auf Vertragsbasis , der die Gesamtverantwortung für geschäftskritische Datenprodukte auf seiner Azure Databricks-basierten Datenplattform übernimmt . Es handelt sich um eine praxisorientierte Rolle direkt im Produktteam, in der Sie eng mit Produktmanagern und leitenden Ingenieuren zusammenarbeiten, um die Entwicklungsqualität zu steigern und die Entwicklung moderner Datenprodukte für Analytik und KI mitzugestalten.

Die Rolle

Als Senior Data Engineer werden Sie:

• Entwicklung skalierbarer Datenprodukte innerhalb eines funktionsübergreifenden Produktteams

• Fungiere als leitender technischer Partner für Produktmanager und leitende Dateningenieure.

• Eigene, komplexe und geschäftskritische Datenprodukte von A bis Z

• Hochwertige Datenpipelines mit Databricks & Spark erstellen und pflegen

• Anforderungen in klare technische Entwürfe und konzeptionelle Datenmodelle umwandeln

• Große, komplexe Datensätze einlesen und manuelle Prozesse automatisieren

• Verbesserung der Datenqualität, Beobachtbarkeit, Zuverlässigkeit und Bereitstellungsleistung

• Fördern Sie eine Kultur des einmaligen Entwickelns und anschließenden vielfachen Konsums auf der gesamten Plattform.

• Arbeiten Sie mit Stakeholdern zusammen, um datenbezogene technische Herausforderungen zu lösen.

• Beitrag zu technischen Standards, Best Practices und Plattformentwicklung

• Andere Ingenieure anleiten und das allgemeine Niveau des Ingenieurwesens anheben

Technische Umgebung

Mein Kunde modernisiert aktiv seine Plattform, verabschiedet sich von veralteten IaaS-Lösungen und baut ein Databricks-basiertes Lakehouse auf . Spark, Delta Lake, CI/CD und moderne DevOps-Praktiken sind zentral für die Entwicklung und Skalierung seiner Datenprodukte.

Was Sie benötigen

• Fundierte praktische Erfahrung mit Azure Databricks & Spark im Produktionsbetrieb

• Mindestens 5 Jahre Erfahrung in der Daten- oder Softwareentwicklung mit starkem Fokus auf Daten.

• Erfahrung im Aufbau produktionsreifer Pipelines auf Azure

• Fundierte SQL-Kenntnisse und Erfahrung mit analytischen Datenmodellen / Data Warehousing

• Gute Python- Kenntnisse (Scala-Kenntnisse von Vorteil)

• Solide technische Disziplin: CI/CD, Testen, Git, DevOps für Daten

• Erfahrung in der Bereitstellung von Datenprodukten auf Unternehmensebene, die von mehreren Teams genutzt werden.

• Fähigkeit, sowohl mit technischen als auch mit nicht-technischen Zielgruppen klar zu kommunizieren

• Erfahrung mit Azure Synapse (dedizierte/serverlose SQL-Pools)

• Agiles Denken; Erfahrung in der Arbeit in Scrum-Teams

Schön zu haben

• Praktische Erfahrung mit Docker , Kubernetes oder Container-Orchestrierung

Vertragsdetails

• Start: So schnell wie möglich

• Standort: London (mit der Möglichkeit zum Homeoffice)

• Dauer: 6 Monate (Verlängerung wahrscheinlich)

• Vergütung: Wettbewerbsfähig, abhängig von der Erfahrung