Databricks Data Engineer | Freiberuflich

UMATR

📍 Germany On-Site ⏳ 7h ago
AI assistant

Job Description

Wir arbeiten mit einem europäischen Technologieunternehmen zusammen, das sich aktuell in einer umfassenden Transformation seiner Datenplattform befindet. Dafür wird ein Senior Databricks Data Engineer gesucht, der das Team zunächst im Rahmen eines 6-monatigen Freelance-Vertrags unterstützt.


Du kommst in ein Umfeld, in dem die Datenplattform aktiv aufgebaut und modernisiert wird, wobei Databricks im Zentrum der Architektur steht.


Woran du arbeiten wirst

  • Entwicklung und Aufbau skalierbarer Datenpipelines innerhalb von Databricks
  • Entwicklung produktionsreifer Workloads mit PySpark, Python und SQL
  • Umfangreiche Arbeit mit Delta Lake und Lakehouse-Architekturen
  • Unterstützung bei der Migration bestehender Workloads zu Databricks
  • Optimierung von Spark-Workloads und Verbesserung der Pipeline-Performance
  • Aufbau zuverlässiger ETL-/ELT-Prozesse