Data Engineer with Databricks
IT CONNECT Sp. z o.o. Sp. k.
AI assistant
Job Description
Zespół Risk Technology buduje i utrzymuje korporacyjne rozwiązania danych na Databricks, dostarczając skalowalne platformy danych i możliwości analityczne. Będziesz projektować pipeline'y w PySpark i SQL, rozwijać modele danych i procesy ETL oraz wspierać architekturę chmurową, CI/CD i data governance. Oferta dla doświadczonego Data Engineera, który dodatkowo mentoruje juniorów i dba o dobre praktyki inżynierskie.
- doświadczenie z Databricks i PySpark
- zaawansowana znajomość SQL i hurtowni danych
- doświadczenie z Azure Data Lake, Azure Data Factory lub podobnymi technologiami chmurowymi
- znajomość modelowania danych, ETL/ELT i optymalizacji wydajności
- doświadczenie w pracy w zespołach Agile