Bright Professionals→
Data Engineer Migratie at Bright… · The Hague
Mid LevelOn-siteFull-timeThe Hague, Netherlands
Job Description
Voor Ministerie van VWS zoeken wij een Data Engineer Migratie. Als ervaren data engineer werk je binnen het Datalab van VWS aan een platform waarop directies hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure, met Databricks als centrale component. Je draagt bij aan het beheer van de bestaande omgeving en aan ontwikkelingen zoals de migratie naar een vernieuwd platform en het via API’s ontsluiten van bronsystemen.
Je bent de technische spil bij complexe datavraagstukken. Je ontwerpt en implementeert ETL/ELT-processen met Python en PySpark, waarmee je data van de bron naar de productielaag in het data lake brengt. Ook ontwerp en onderhoud je centrale semantische modellen, zodat datastructuren en definities goed op elkaar aansluiten en betrouwbare Power BI-rapportages mogelijk zijn.
Je onderhoudt het Azure-dataplatform samen met de beheerpartij voor de cloudomgeving en bent hiervoor het aanspreekpunt. Binnen het team help je bij complexe datatransformaties en schema-updates. Daarnaast denk je mee over de verdere ontwikkeling van het platform en nieuwe initiatieven. Je onderzoekt ook hoe AI de werklast van operationele teams kan verlagen.
Je bent de technische spil bij complexe datavraagstukken. Je ontwerpt en implementeert ETL/ELT-processen met Python en PySpark, waarmee je data van de bron naar de productielaag in het data lake brengt. Ook ontwerp en onderhoud je centrale semantische modellen, zodat datastructuren en definities goed op elkaar aansluiten en betrouwbare Power BI-rapportages mogelijk zijn.
Je onderhoudt het Azure-dataplatform samen met de beheerpartij voor de cloudomgeving en bent hiervoor het aanspreekpunt. Binnen het team help je bij complexe datatransformaties en schema-updates. Daarnaast denk je mee over de verdere ontwikkeling van het platform en nieuwe initiatieven. Je onderzoekt ook hoe AI de werklast van operationele teams kan verlagen.
Functie-eisen
- Je beschikt over minimaal hbo-werk- en -denkniveau, aangetoond met een afgeronde hbo-opleiding en/of minimaal 3 jaar aantoonbare werkervaring op hbo-niveau.
- Je hebt minimaal 3 jaar aantoonbare werkervaring als data-engineer op Microsoft Azure.
- Je hebt aantoonbare kennis van en ervaring met Databricks, Python en PySpark.
- Je hebt minimaal 3 jaar aantoonbare kennis van en ervaring met datamodellering, ETL-processen en het bouwen van pipelines.
Functie-wensen
- Het is een pre als je ervaring hebt met werken in agile teams.
- Bij voorkeur heb je kennis van het Azure-dataplatform (Databricks, Delta Lake, Unity Catalog, Azure Data Factory en ADLS) en ervaring met platformmigraties.
- Bij voorkeur heb je kennis van datamodellering en semantische modellen, ervaring met het opzetten van ETL/ELT-processen en het bouwen van pipelines met Python en PySpark, inclusief API-integraties.
- Het is een pre als je relevante certificeringen uit de DP-reeks hebt en aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps en Terraform).
- Bij voorkeur beschik je over de gevraagde competenties en vaardigheden.
Extra Informatie
- Aantal uur 36
- ZZP mogelijk? Ja
- Thuiswerken mogelijk? N.t.b.
- Startdatum 12-11-2026
- Opleidingsniveau HBO