Data engineer migratie (datalab)
SLTN
AI assistant
Job Description
For this assignment, we are looking for candidates who have excellent communication skills in Dutch (spoken and written)
Omschrijving
Het Datalab van VWS is de omgeving waarin de directies van VWS hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure met Databricks als centrale component. Voor het onderhoud van de bestaande omgeving en voor een aantal aanstaande ontwikkelingen, waaronder de migratie naar een vernieuwd platform en het via API ontsluiten van bronsystemen, zoeken wij een ervaren data engineer.
De data engineer is binnen het team de technische ruggengraat voor de complexere datavraagstukken. Je ontwerpt en implementeert ETL/ELT-processen die data van bron tot productielaag in het data lake brengen met Python en PySpark, en je ontwerpt en onderhoudt de centrale semantische modellen, zodat datastructuren en definities op elkaar aansluiten en er stabiele Power BI-rapportages op gebouwd kunnen
Omschrijving
Het Datalab van VWS is de omgeving waarin de directies van VWS hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure met Databricks als centrale component. Voor het onderhoud van de bestaande omgeving en voor een aantal aanstaande ontwikkelingen, waaronder de migratie naar een vernieuwd platform en het via API ontsluiten van bronsystemen, zoeken wij een ervaren data engineer.
De data engineer is binnen het team de technische ruggengraat voor de complexere datavraagstukken. Je ontwerpt en implementeert ETL/ELT-processen die data van bron tot productielaag in het data lake brengen met Python en PySpark, en je ontwerpt en onderhoudt de centrale semantische modellen, zodat datastructuren en definities op elkaar aansluiten en er stabiele Power BI-rapportages op gebouwd kunnen