Data engineer migratie (datalab)

Opdrachtomschrijving

Het Datalab van het ministerie van Volksgezondheid, Welzijn en Sport (VWS) beheert en ontwikkelt het Azure-dataplatform waarop de directies van VWS hun data-initiatieven onderbrengen. Vanuit dit platform worden data-analyses, rapportages en datagedreven werken binnen het departement ondersteund. Het Datalab is onderdeel van de afdeling IV binnen de directie Organisatie, Bedrijfsvoering en Personeel.

Voor het onderhoud van de bestaande omgeving en de doorontwikkeling van het platform zoek je als data engineer aansluiting bij het team. Een belangrijke aanleiding is de migratie naar een vernieuwd platform. Daarnaast wordt gewerkt aan het via API ontsluiten van bronsystemen. Binnen het team vorm je de technische ruggengraat voor complexe datavraagstukken.

Je ontwerpt en implementeert ETL- en ELT-processen waarmee data van bron tot productielaag in het data lake wordt gebracht. Ook ontwerp en onderhoud je centrale semantische modellen, zodat datastructuren en definities op elkaar aansluiten en stabiele Power BI-rapportages kunnen worden gebouwd. Je onderhoudt het Azure-dataplatform samen met de beheerpartij van de cloudomgeving en bent daarvoor het aanspreekpunt. Daarnaast denk je mee over de doorontwikkeling en nieuwe initiatieven en verken je hoe AI de werklast van operationele teams kan verlagen.

Gevraagd profiel

Je bent een ervaren data engineer met minimaal drie jaar aantoonbare ervaring op Microsoft Azure en met Databricks, waaronder Delta Lake en Unity Catalog. Je hebt ruime ervaring met Python, PySpark, ETL- en ELT-processen, het bouwen en orkestreren van pipelines, datamodellering en semantische modellen. Ook weet je hoe je API-integraties, CI/CD, versiebeheer en infrastructure as code toepast. Ervaring met platformmigraties en relevante Azure-datacertificeringen is een pré.

Je werkt en denkt op HBO- of WO-niveau in een bèta- of ICT-richting en hebt ervaring in agile teams. Je bent analytisch, nauwkeurig, klantgericht en organisatiesensitief. Je werkt goed samen, begrijpt de gebruikers en beheerst de Nederlandse taal. Voor deze opdracht ben je minimaal 32 uur per week beschikbaar.

Eisen

• Kandidaat beschikt over minimaal HBO werk- en denkniveau (kan worden aangetoond dmv een afgeronde HBO opleiding en/of aantoonbare werkervaring van minimaal 3 jaar op HBO niveau)
• Kandidaat beschikt over minimaal 3 jaar aantoonbare werkervaring als data engineer op Microsoft Azure
• Kandidaat beschikt over aantoonbare kennis van en ervaring met Databricks Python en PySpark
• Kandidaat beschikt over aantoonbaar minimaal 3 jaar kennis van en ervaring met datamodellering ETL-processen en het bouwen van pipelines
• Kandidaat is minimaal 32 uur per week beschikbaar voor de duur van de opdracht

Wensen

• Mate waarin de kandidaat ervaring heeft met het werken in agile teams
• Mate waarin de kandidaat kennis heeft van het Azure dataplatform (Databricks, Delta Lake, Unity Catalog, Azure Data Factory, ADLS) en ervaring heeft met platformmigraties
• Mate waarin de kandidaat kennis heeft van datamodellering en semantische modellen, het opzetten van ETL/ELT-processen en het bouwen van pipelines met Python en PySpark, inclusief API-integraties
• Mate waarin de kandidaat beschikt over relevante certificeringen vanuit de DP reeks en aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
• Mate waarin kandidaat beschikt over de gevraagde competenties en vaardigheden (toetsbaar in CV, motivatie en/of mogelijk gesprek)

Competenties

• Analytisch denkt
• Nauwkeurig werkt
• De Nederlandse taal in woord en geschrift beheerst
• Klantgericht is
• Organisatiesensitief is
• Goed samenwerkt in teamverband
• Zich goed kan verplaatsen in de gebruikers