Deine Aufgaben:

Entwicklung, Betrieb und kontinuierliche Weiterentwicklung einer AWS-basierten Dateninfrastruktur und entsprechender Datenpipelines
Optimierung und Sicherstellung des stabilen Betriebs von Spark-ETL-Prozessen für eine effiziente Datenverarbeitung
Entwicklung und Pflege robuster Datenpipelines in enger Zusammenarbeit mit Data Ownern und Data Analysts
Analyse fachlicher und technischer Anforderungen sowie Konzeption und Umsetzung von Datenprodukten innerhalb eines AWS Big Data Stacks
Automatisierung von Entwicklungs- und Betriebsprozessen sowie kontinuierliche Weiterentwicklung des bestehenden Entwicklungs-Stacks
Coaching und fachliche Unterstützung anderer Data Engineers bei technischen Fragestellungen und Automatisierungsthemen
Enge Zusammenarbeit mit Business-Stakeholdern und Architekturteams zur Ausrichtung technischer Lösungen an den Geschäftsanforderungen
Optimierung bestehender AWS Services hinsichtlich Performance und Kosten
Unterstützung bei Migrationen auf neue Tools, Technologien und Cloud-Services
Mitgestaltung moderner CI/CD-, Infrastructure-as-Code- und DevOps-Prozesse

Dein Profil:

Mehrjährige Erfahrung im Data Engineering und in der Entwicklung komplexer Datenpipelines
Hochschulabschluss in Informatik oder eine vergleichbare Qualifikation bzw. entsprechende Berufserfahrung
Fundierte Kenntnisse in Apache Spark, SQL und Python
Erfahrung mit AWS und cloudbasierten Big-Data-Architekturen
Idealerweise Kenntnisse in AWS Analytics Services wie Glue, SageMaker, Athena, Lambda und Batch
Erfahrung in der Softwareentwicklung mit Scala oder Java von Vorteil
Kenntnisse in CI/CD sowie Infrastructure as Code mit Terraform
Gutes Verständnis von DevOps Best Practices und automatisierten Entwicklungs- und Betriebsprozessen
Erfahrung in der Optimierung von Cloud-Ressourcen hinsichtlich Performance und Kosten von Vorteil
Agile und teamorientierte Arbeitsweise mit ausgeprägtem Growth Mindset und Freude am Wissensaustausch
Sehr gute Deutschkenntnisse in Wort und Schrift sowie gute Englischkenntnisse

Senior Data Engineer AWS

Offres similaires