Let op! Deze opdracht is afkomstig van één van de brokers van de opdrachtgever. We zijn bij De Transparante Broker tegen ketenvorming, maar kiezen er toch voor om deze opdracht door te plaatsen. Lees hier waarom.

Opdrachtomschrijving

Voor het Ministerie van Volksgezondheid, Welzijn en Sport, Kerndepartement, werk je binnen het Datalab in Den Haag. Het Datalab biedt de directies van VWS een omgeving waarin zij hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure, met Databricks als centrale component.

De opdracht richt zich op het onderhoud van de bestaande omgeving en op ontwikkelingen zoals de migratie naar een vernieuwd platform en het via API ontsluiten van bronsystemen. Als data engineer ontwerp en implementeer je ETL/ELT-processen die data met Python en PySpark van bron tot productielaag in het data lake brengen.

Daarnaast ontwerp en onderhoud je de centrale semantische modellen. Daarmee zorg je dat datastructuren en definities op elkaar aansluiten en dat stabiele Power BI-rapportages kunnen worden gebouwd. Je onderhoudt het Azure-dataplatform samen met de beheerpartij van de cloudomgeving en bent daarvoor het aanspreekpunt.

Binnen het team vorm je de technische ruggengraat voor complexere datavraagstukken. Je bent aanspreekpunt voor moeilijke datatransformaties en schema-updates, denkt mee over de doorontwikkeling en nieuwe initiatieven en verkent hoe AI kan bijdragen aan het verlagen van de werklast bij operationele teams.

Gevraagd profiel

Je bent een ervaren data engineer met aantoonbare ervaring op Microsoft Azure en met Databricks, waaronder Delta Lake en Unity Catalog. Je hebt ruime ervaring met Python, PySpark, het opzetten en orkestreren van ETL/ELT-processen, datamodellering en semantische modellen. Ook ben je bekend met API-integraties, CI/CD, versiebeheer en infrastructure as code met Azure DevOps en Terraform. Ervaring met platformmigraties van on-premises of legacy naar een cloud-dataplatform is een pre.

Je hebt hbo/wo-werk- en denkniveau in een bèta- of ICT-richting en bent analytisch en nauwkeurig. Je werkt al geruime tijd in een agile omgeving, beheerst de Nederlandse taal, werkt goed samen en bent klantgericht en organisatiesensitief. Je kunt je goed verplaatsen in gebruikers en bent minimaal 32 uur per week beschikbaar.

Eisen

Minimaal 3 jaar aantoonbare werkervaring als data engineer op Microsoft Azure
Aantoonbare ervaring heeft met Databricks (onder meer Delta Lake en Unity Catalog)
Uitstekende programmeervaardigheden heeft in Python en aantoonbare ervaring met PySpark
Minimaal 3 jaar ervaring heeft met het opzetten van ETL/ELT-processen en het bouwen en orkestreren van pipelines
Minimaal 3 jaar ervaring heeft met datamodellering, conceptueel en dimensioneel, en met het ontwerpen en onderhouden van semantische modellen
Aantoonbare ervaring heeft met API-integraties en het ontsluiten van bronsystemen
Aantoonbare ervaring heeft met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
In het bezit is van een of meer relevante Azure datacertificeringen (de DP reeks binnen de azure certificaten)
Minimaal 5 jaar aantoonbare ervaring heeft met het werken in een agile omgeving
Minimaal 32 uur per week beschikbaar is
De Nederlandse taal in woord en geschrift beheerst

Wensen

Ervaring heeft met platformmigraties, van on-premises of legacy naar een cloud dataplatform, is een pre
Mate waarin de kandidaat ervaring heeft met het werken in agile teams
Mate waarin de kandidaat kennis heeft van het Azure dataplatform (Databricks, Delta Lake, Unity Catalog, Azure Data Factory, ADLS) en ervaring heeft met platformmigraties
Mate waarin de kandidaat kennis heeft van datamodellering en semantische modellen, het opzetten van ETL/ELT-processen en het bouwen van pipelines met Python en PySpark, inclusief API-integraties
Mate waarin de kandidaat beschikt over relevante certificeringen vanuit de DP reeks en aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
Mate waarin kandidaat beschikt over de gevraagde competenties en vaardigheden (toetsbaar in CV, motivatie en/of mogelijk gesprek)

Competenties

Ervaren
De technische ruggengraat voor de complexere datavraagstukken
Analytisch denkt en nauwkeurig werkt
Klantgericht en organisatiesensitief is
Goed samenwerkt in teamverband
Zich goed kan verplaatsen in de gebruikers

Data engineer migratie (datalab)

Ministerie van Volksgezondheid, Welzijn en Sport (VWS)