Senior Data Engineer AWS

Deine Aufgaben:

• Entwicklung, Betrieb und kontinuierliche Weiterentwicklung einer AWS-basierten Dateninfrastruktur und entsprechender Datenpipelines
• Optimierung und Sicherstellung des stabilen Betriebs von Spark-ETL-Prozessen für eine effiziente Datenverarbeitung
• Entwicklung und Pflege robuster Datenpipelines in enger Zusammenarbeit mit Data Ownern und Data Analysts
• Analyse fachlicher und technischer Anforderungen sowie Konzeption und Umsetzung von Datenprodukten innerhalb eines AWS Big Data Stacks
• Automatisierung von Entwicklungs- und Betriebsprozessen sowie kontinuierliche Weiterentwicklung des bestehenden Entwicklungs-Stacks
• Coaching und fachliche Unterstützung anderer Data Engineers bei technischen Fragestellungen und Automatisierungsthemen
• Enge Zusammenarbeit mit Business-Stakeholdern und Architekturteams zur Ausrichtung technischer Lösungen an den Geschäftsanforderungen
• Optimierung bestehender AWS Services hinsichtlich Performance und Kosten
• Unterstützung bei Migrationen auf neue Tools, Technologien und Cloud-Services
• Mitgestaltung moderner CI/CD-, Infrastructure-as-Code- und DevOps-Prozesse

Dein Profil:

• Mehrjährige Erfahrung im Data Engineering und in der Entwicklung komplexer Datenpipelines
• Hochschulabschluss in Informatik oder eine vergleichbare Qualifikation bzw. entsprechende Berufserfahrung
• Fundierte Kenntnisse in Apache Spark, SQL und Python
• Erfahrung mit AWS und cloudbasierten Big-Data-Architekturen
• Idealerweise Kenntnisse in AWS Analytics Services wie Glue, SageMaker, Athena, Lambda und Batch
• Erfahrung in der Softwareentwicklung mit Scala oder Java von Vorteil
• Kenntnisse in CI/CD sowie Infrastructure as Code mit Terraform
• Gutes Verständnis von DevOps Best Practices und automatisierten Entwicklungs- und Betriebsprozessen
• Erfahrung in der Optimierung von Cloud-Ressourcen hinsichtlich Performance und Kosten von Vorteil
• Agile und teamorientierte Arbeitsweise mit ausgeprägtem Growth Mindset und Freude am Wissensaustausch
• Gute Deutschkenntnisse in Wort und Schrift sowie gute Englischkenntnisse