Dateningenieur

Ihre Aufgaben:

• Entwicklung und Wartung von ETL-Pipelines mit PySpark, SparkSQL und Python innerhalb unserer Lakehouse-Datenplattform.

• Arbeiten Sie mit cloudbasierter Infrastruktur (AWS), um skalierbare Datenlösungen zu entwickeln, bereitzustellen und zu warten.

• Sicherstellung der Datenqualität, Implementierung von Überwachungsmechanismen und Unterstützung von CI/CD-Prozessen für Datenpipelines.

• Eng mit Datenanalysten, ML-Ingenieuren und anderen Datenexperten zusammenarbeiten, um zuverlässige und gut strukturierte Datensätze zu liefern.

• Leisten Sie einen Beitrag zur Modernisierung unserer bestehenden Dateninfrastruktur und helfen Sie bei der Migration von Legacy-Lösungen zu einer einheitlichen Lakehouse-Architektur.

Sie benötigen:

• Bachelor-Abschluss in Informatik, Informationssystemen, Ingenieurwesen, Mathematik oder einem verwandten Fachgebiet.

• Etwa 1-3 Jahre Erfahrung im Bereich Data Engineering.

• Fundierte praktische Kenntnisse in Python und Spark (PySpark) – erforderlich für die tägliche Entwicklung.

• Praktische Erfahrung mit mindestens einer der großen Cloud-Plattformen (AWS, Azure oder Google Cloud) ist erforderlich.

• SQL-Kenntnisse für die Arbeit mit strukturierten und semistrukturierten Daten.

• Kenntnisse über Data Lakes und Datenmodellierungsprinzipien.

• Erfahrung mit Git-basierten Entwicklungs-Workflows und CI/CD-Praktiken.

• Fließende Englischkenntnisse und ausgeprägte Problemlösungskompetenz.

Schön zu haben:

• Erfahrung mit Terraform oder einem anderen Infrastructure as Code-Tool.

• Grundkenntnisse in Databricks, AWS Glue oder anderen verteilten Datenverarbeitungstools.

• Kenntnisse im Bereich Monitoring, Datentest-Frameworks oder Datenqualitätsautomatisierung.

• Neugierde für MLOps und Datenorchestrierungstools.

Was wir bieten und was Sie erwarten können:

• Anspruchsvolle Aufgaben und echte Wirkung – Sie werden direkt daran beteiligt sein, neue Projekte zum Leben zu erwecken und Einfluss darauf zu nehmen, wie wir als E-Commerce-Unternehmen wachsen.

• Dynamisches Lernumfeld – wir sind ein internationales Team, daher werden Sie ständig neue Fähigkeiten und Erkenntnisse erwerben.

• Flexible Arbeitszeiten und B2B-Vertrag – Sie entscheiden, wann und wie Sie arbeiten.

• Viel Raum für Weiterentwicklung – durch praktische Erfahrung, Schulungen und die Zusammenarbeit mit Experten aus verschiedenen Teilen der Welt.