Data Engineer
Manana GmbH
AI assistant
Job Description
- Design, Erstellung und Wartung von produktionsreifen Data Pipelines
- Architektur und Design für eine gesamte Datenstrecke über DataLake, harmonisiertes zentrales Modell, zentrales Datenprodukt mit mehreren Abnehmern
- ETL Entwicklung & Durchführung von System & Integrationstests im Rahmen der agilen Umsetzung
- Design von ELT Strukturen in enger Abstimmung mit dem System Architektur Team
- Mitarbeit im Product Team organisiert nach SAFE
Anforderungen:
- Erfahrung mit Databricks, Azure, Python, PySpark, Pandas und SQL
- Erfahrung mit agilen Softwareentwicklungsprozessen und Datenmanagementprojekten
- Erfahrung in der Zusammenarbeit mit agilen Softwareentwicklungsteams
- Fähigkeit, komplexe technische Zusammenhänge für nicht-technische Zielgruppen verständlich darzustellen
- Kenntnisse des Software Development Lifecycle (SDLC)
- Kenntnisse im Release Management und in