Technischer Architekt – Datenplattformen

Beschreibung

Wir suchen einen erfahrenen technischen Architekten zur Unterstützung des Designs und der Weiterentwicklung von groß angelegten, Cloud-basierten Datenplattformen für unser gesamtes Kundenportfolio.

Der technische Architekt wird eine Schlüsselrolle bei der Gestaltung von Lösungsdesignmustern spielen, die Einhaltung etablierter Standards sicherstellen und einen strategischen Übergang sowie Migrationen zwischen AWS und Azure unterstützen.

Key Responsibilities

• Technische Architekturmuster für die Datenerfassung, -verarbeitung und den Datenzugriff definieren und weiterentwickeln.
• Entwicklung skalierbarer, robuster und kosteneffizienter Datenlösungen im Rahmen eines Hub-and-Spoke-Modells.
• Unterstützung bei der Entwicklung neuer Datenaufnahmepipelines (Batch- und Echtzeitverarbeitung).
• Sicherstellen der Übereinstimmung mit den organisatorischen Architekturstandards und Governance-Rahmenbedingungen.
• Beitrag zu den Roadmaps für die Zielarchitektur leisten.
• Architektonische Beratung in folgenden Bereichen:
  • Datenerfassung (Kafka, APIs, SFTP)
  • Datenverarbeitung (PySpark, EMR, Glue)
  • Speicherung (S3- und Data-Lake-Muster)
• Arbeiten Sie mit DevOps-, Dateningenieur- und Testern zusammen, um eine reibungslose Lieferung zu gewährleisten.
• Förderung bewährter Engineering-Praktiken, einschließlich CI/CD, Infrastruktur als Code und Observability.
• Gewährleisten Sie eine robuste Handhabung der Schemaentwicklung und von Änderungen an vorgelagerten Daten.
• Unterstützung bei der Integration neuer Datenquellen und Dienste in die Plattform.
• Sicherstellen, dass die Lösungen die folgenden Anforderungen erfüllen:
  • Datenqualität und -konsistenz
  • Leistung und Skalierbarkeit
  • Sicherheit und Compliance
• Arbeiten Sie gegebenenfalls innerhalb der festgelegten Zuständigkeitsbereiche für die Datenmodellierung.
• Unterstützung der Weiterentwicklung von Cloud-Strategien.
• Vermeiden Sie eine Abhängigkeit von einer bestimmten Plattform und gewährleisten Sie portable, zukunftssichere Designs.
• Beteiligen Sie sich an technischen Entscheidungen zur zukünftigen Ausrichtung der Plattform.
• Arbeiten Sie in gemischten, funktionsübergreifenden Teams.
• Technische Führung und Mentoring der Entwicklungsteams übernehmen.
• Einen effektiven Wissenstransfer und eine Steigerung der Kompetenzen sicherstellen.

Erforderliche Fähigkeiten und Erfahrungen

• Fundierte Erfahrung in der Konzeption moderner cloudbasierter Datenplattformen.
• Praktische Architekturerfahrung mit:
  • AWS (unbedingt erforderlich): S3, EMR, Glue
  • Kafka / Event-Streaming-Architekturen
  • Datenverarbeitung basierend auf Python und PySpark
• Erfahrung in der Konzeption von Datenaufnahmepipelines (Batch- und Echtzeitverarbeitung).
• Kenntnisse in Infrastructure as Code (Terraform).
• Erfahrung mit GitHub-basierten Workflows und CI/CD-Pipelines.
• Erfahrung mit Data-Lake- und Lakehouse-Architekturen.
• Fundiertes Verständnis von:
  • Datenaufnahmemuster
  • Datentransformations- und Kurationsschichten
  • Datenzugriff und Produktisierung
• Fähigkeit zur Verarbeitung großer Datensätze.
• Erfahrung in der Unterstützung von Cloud-Migrationen
• Kenntnisse und Erfahrung mit Azure, Microsoft Fabric und Databricks sind von Vorteil.
• Vertrautheit mit ereignisgesteuerten und Streaming-basierten Architekturen im großen Maßstab.
• Starke Fähigkeiten im Stakeholder-Management und in der teamübergreifenden Zusammenarbeit.
• Die Fähigkeit, innerhalb der bestehenden Richtlinien und Standards effektiv zu arbeiten.
• Pragmatische Entscheidungsfindung unter Berücksichtigung von Liefertempo und technischer Qualität.
• Kommunikationsstark und in der Lage, komplexe Architekturen in konkrete Handlungsanweisungen zu übersetzen.
• Erfahrung in der Arbeit in großen, komplexen Unternehmensumgebungen.

Für diese Position ist die Fähigkeit erforderlich, eine britische Sicherheitsüberprüfung (SC Clearance) zu erhalten und aufrechtzuerhalten.