Data Engineer

Opdrachtomschrijving

Als Azure data en devops engineer werk je binnen het Datamanagement & Platform-team van het Instituut Mijnbouwschade Groningen (IMG), onderdeel van de Rijksdienst voor Ondernemend Nederland. Vanuit de afdeling Informatievoorziening ontwikkelt en beheert het team het dataplatform van IMG en ondersteunt het de organisatie bij alle onderdelen van datamanagement.

Je houdt je bezig met het verzamelen en verwerken van data voor analyses en informatieproducten voor klanten binnen de IMG-organisatie. Daarbij werk je met grote datavolumes, verschillende dataformaten en preprocessing. Je richt data pipelines en dataopslag in, onder meer in Azure Blob Storage, een data lake en SQL-databases of andere storagevormen.

Daarnaast richt je de Azure DevOps-omgeving in en beheer je deze, zodat modellen en andere informatieproducten gestructureerd in productie kunnen worden gezet. Je werkt mee aan de gegevensuitwisseling tussen Azure en de omgeving in samenwerking met Dictu en stemt de inrichting van informatiebeveiliging af. Ook stem je af met de Azure-architect, data scientists, data-analisten en interne en externe partijen. Het team werkt volgens Agile, met Scrum als werkwijze.

Het beoogde resultaat is een goed ingericht en beheerd dataplatform waarmee data betrouwbaar kan worden verzameld, verwerkt, uitgewisseld en benut voor de dienstverlening en informatieproducten van IMG.

Gevraagd profiel

Je bent een Azure data en devops engineer die ervaring heeft met het verwerken van grote datavolumes, verschillende dataformaten en preprocessing. Je hebt ervaring met data pipelines en dataopslag in Azure-omgevingen, zoals Azure Blob Storage, data lakes en SQL-databases.

Je bent daarnaast in staat een Azure DevOps-omgeving in te richten en te beheren voor het gestructureerd in productie brengen van modellen en andere informatieproducten. Je werkt samen met architecten, data scientists, data-analisten en andere interne en externe partijen. Daarbij werk je binnen een Agile Scrum-team en stem je gegevensuitwisseling, informatiebeveiliging en de kaders van informatieproducten zorgvuldig af.

Eisen

• Azure AZ-400 certificering
• Minimaal 4 jaar ervaring met het inrichten van Azure DevOps en data-pipelines (deployment by code/CGA), onderbouwd met concrete projecten en rolbeschrijving in cv of motivatie
• Minimaal 4 jaar ervaring met SQL en Python, onderbouwd met concrete projecten en rolbeschrijving in cv of motivatie
• Ervaring met GitLab en/of MLOps en/of Docker en/of Kubernetes en/of REST, onderbouwd met concrete projecten en rolbeschrijving in cv of motivatie
• Aantoonbare ervaring bij een uitvoerende organisatie binnen de overheid
• Minimaal 2 jaar aantoonbare ervaring met Databricks, onderbouwd met concrete projecten en rolbeschrijving in cv of motivatie
• Meerdere certificaten in moderne ontwikkelomgevingen en tooling (Python, R, SAS Enterprise Guide, SQL, etc.)

Competenties

• Duidelijk en effectief communiceren met teamleden en belanghebbenden, zowel mondeling als schriftelijk
• In staat complexe zaken begrijpelijk te presenteren
• Agnostisch ten aanzien van tooling
• Teamplayer