Ministerie van Sociale Zaken

Senior Data Engineer

Korte omschrijving

40-40 uur per week | 12 maanden (verlengbaar) | Reageren kan tot 27-09-26

Functie omschrijving

Voor Ministerie van Sociale Zaken zijn wij op zoek naar een Senior Data Engineer

Functietitel

Senior Data Engineer

Opdracht

Je realiseert hands‑on een centrale, herbruikbare en beheersbare inrichting op het Cloud Data Platform (Azure/Databricks) voor het ontsluiten, verrijken en beschikbaar maken van publieke databronnen voor intern hergebruik binnen SZW/NLA.

Belangrijkste taken en verantwoordelijkheden
  • Inventariseren van relevante publieke databronnen (bijv. open.overheid.nl, Tweede Kamer) en hun technische ontsluitingsmogelijkheden.
  • Ontwerpen en realiseren van robuuste data‑ingestie naar het Cloud Data Platform, inclusief API‑gebaseerde en andere open bronnen.
  • Opschonen, transformeren, verrijken en structureren van data zodat deze bruikbaar en consistent beschikbaar is voor hergebruik.
  • Inrichten van herhaalbare data‑pipelines in Azure/Databricks, inclusief foutafhandeling, logging, monitoring en herstelbaarheid.
  • Beschikbaar maken van datasets in vormen passend bij verschillende gebruiksscenario’s (analyses, dashboards, AI‑toepassingen, verdere dataverwerking).
  • Bijdragen aan afspraken over datamodellering, metadata, documentatie, kwaliteit en beheer voor snellere en consistentere aansluiting van volgende databronnen.
  • Afstemmen met betrokken stakeholders zoals het DACC, data‑afnemers, architectuur, platformbeheer en andere teams.
  • Mede bepalen van technische keuzes en richting binnen het team en overdragen van kennis aan teamleden.
Gewenste kennis en vaardigheden
  • Ervaring met het bouwen van productie‑waardige data‑ingestie en transformatiepipelines.
  • Kennis van Azure en Databricks en bijbehorende best practices voor schaalbaarheid en beheer.
  • Ervaring met API‑integratie en ontsluiting van openbare databronnen.
  • Vaardigheden in dataops‑aspecten: foutafhandeling, logging, monitoring en herstelstrategieën.
  • Ervaring met datamodellering, metadata, documentatie en kwaliteitsafspraken.
  • Communicatief vaardig in afstemming met technische en niet‑technische stakeholders; ervaring met kennisoverdracht binnen teams.
Afbakening

De focus ligt op het centraal ontsluiten van publieke databronnen binnen het Cloud Data Platform voor intern hergebruik. Exacte prioritering en invulling worden per sprint of iteratie in het team bepaald.

Functie eisen

Eisen

  1. Minimaal 5 jaar ervaring als Data Engineer of in een vergelijkbare rol
  2. Aantoonbare ervaring met het ontwerpen en bouwen van data-pipelines en data-integraties in een cloudomgeving, bij voorkeur Microsoft Azure
  3. Ervaring met Databricks, Spark, Python en SQL
  4. Ervaring met het ontsluiten en verwerken van data uit externe bronnen, zoals REST API’s, open datasets en bestanden in verschillende formaten
  5. Ervaring met het opschonen, transformeren en modelleren van data voor hergebruik door verschillende afnemers
  6. Ervaring met het inrichten van robuuste, onderhoudbare en herhaalbare oplossingen, inclusief monitoring, foutafhandeling en documentatie
  7. Kennis van data-architectuur, datamodellering en datakwaliteit
  8. Ervaring met werken in een Agile/sprintteam
  9. Kandidaat beschikt over WO werk- en denkniveau
  10. Kandidaat heeft minimaal 5 jaar werkervaring als Data Engineer of in een vergelijkbare rol
  11. Kandidaat beschikt over kennis van data-engineering in Microsoft Azure, waaronder het ontwerpen en/of bouwen en/of beheren van dataoplossingen en/of het werken met gangbare programmeer- en querytalen
  12. Kandidaat heeft ervaring met het ontsluiten en/of combineren en/of verwerken van data uit externe bronnen binnen een Azure-omgeving ( zoals via API’s, databestanden en andere gegevensbronnen in verschillende formaten)

Wensen

  1. Ervaring met Azure Data Platform-componenten naast Databricks, zoals Azure Storage, en Data Factory
  2. Ervaring met Delta Lake, medallion-architectuur of vergelijkbare patronen voor data opwerking
  3. Ervaring met publieke of overheidsdatabronnen, zoals open.overheid.nl, parlementaire data of andere open data-voorzieningen
  4. Ervaring met metadata, lineage en documentatie van datasets
  5. Ervaring binnen een overheidsorganisatie of in een omgeving met hoge eisen aan beheer, beveiliging en herbruikbaarheid
  6. Mate waarin de kandidaat kennis van Azure Databricks, Spark, Python, SQL en het bouwen van robuuste, herhaalbare data-pipelines, inclusief monitoring, foutafhandeling en beheerbaarheid
  7. Mate waarin de kandidaat ervaring heeft met het ontsluiten, opschonen, transformeren en beschikbaar maken van publieke of externe databronnen voor meervoudig intern gebruik, bij voorkeur in een overheidscontext of vergelijkbare complexe omgeving
  8. Mate van ervaring en/of affiniteit met de organisatie van de opdrachtgever

Competenties

  • In staat om zelfstandig technische vraagstukken op te pakken en tegelijk goed samen te werken met collega’s uit verschillende disciplines
  • Goede communicatieve vaardigheden en in staat om technische keuzes helder toe te lichten aan teamleden en stakeholders
  • Technische senioriteit: zelfstandig complexe data-vraagstukken oppakken, samenwerken met verschillende stakeholders, technisch richting geven en kennis overdragen aan teamleden

Bedrijfsprofiel

BLAU Bemiddeling richt zich op de bemiddeling van professionals in het publieke domein. Wij geloven in de formule dat het zoeken naar een passende opdracht en de samenwerking tussen de professional en BLAU Bemiddeling gebaseerd moet zijn op in de basis eenvoudige en duidelijke afspraken.
Bij een match op papier stellen we gezamenlijk de documentatie op:

  • Op voorhand duidelijke afspraken over tarief, afgestemd op de specifieke opdracht.
  • Een opdracht niet in te vullen als zelfstandige of voorkeur voor detachering? Dan heeft BLAU Bemiddeling hier een passende oplossing voor en hanteren we de beloningsstructuur van de opdrachtgever middels de inlenersbeloning.
  • Inzicht in de keten en volledige duidelijkheid in de procedure.
  • Snelle betaling.
  • Wij stellen je profiel op in het format voor de betreffende aanbieder. Hierbij vragen we van jou als professional verduidelijking in de eisen en wensen om zo de match op papier zo goed mogelijk aan te tonen.
  • Jij als professional schrijft een motivatiebrief gericht op de opdracht.
  • Wij verzorgen de aanbieding en informeren zo snel mogelijk over het vervolg in het traject.

Arbeidsvoorwaarden

  • Startdatum: 12-10-26.
  • Looptijd: 12 maanden.
  • Locatie: The Hague.
  • Aantal uren: 40-40 uur per week.
  • Contractvorm: In overleg.

Reageer direct!
De opdracht sluit 27-09-26.

Senior Data Engineer
Solliciteren