Senior Data Engineer

Wil jij als Senior Data Engineer bouwen aan een modern data- en analyseplatform dat bijdraagt aan beter onderbouwd beleid rondom economie, innovatie, energie en duurzaamheid? Voor een grote publieke organisatie zoeken wij een ervaren Data Engineer die sterk is in Azure Databricks, ETL/ELT, datamodellering en platformontwikkeling.

De organisatie

Je komt terecht binnen een maatschappelijke organisatie waar data een steeds belangrijkere rol speelt in beleidsvorming en besluitvorming. De organisatie werkt aan thema’s als economische ontwikkeling, innovatie, ondernemerschap, energie en duurzaamheid.
Binnen de informatievoorziening wordt gewerkt aan de verdere ontwikkeling van een centraal data- en analyseplatform. Dit platform moet data uit verschillende bronnen toegankelijker maken en omzetten naar betrouwbare dataproducten voor beleidsdirecties, analisten en data scientists.

De opdracht

Als Senior Data Engineer zorg je ervoor dat data betrouwbaar wordt ontsloten, gecombineerd en beschikbaar gemaakt voor analyses. Je ontwikkelt en optimaliseert datapipelines binnen Microsoft Azure en Azure Databricks, bouwt datamodellen en denkt mee over de verdere doorontwikkeling van het platform.
Daarnaast draag je bij aan het professionaliseren van ETL-processen, het opzetten van een doorzoekbare data-catalogus en het beschrijven van best practices. Je werkt nauw samen met datagebruikers, data scientists, architecten en platformspecialisten en helpt collega’s om datagedreven werken verder eigen te maken.

Jouw werkzaamheden

• Ontwikkelen, onderhouden en optimaliseren van datapipelines binnen Azure Databricks;
• Ontwerpen en bouwen van datamodellen voor analyses en dataproducten;
• Ontsluiten en combineren van data uit verschillende bronnen;
• Meedenken over de doorontwikkeling van het data- en analyseplatform;
• Bijdragen aan een doorzoekbare data-catalogus;
• Professionaliseren van bestaande ETL-processen;
• Opstellen en delen van best practices en werkwijzen;
• Fungeren als sparringpartner op data-architectuurvraagstukken;
• Samenwerken met data scientists, analisten, architecten en business stakeholders;
• Stimuleren van datagedreven werken binnen de organisatie.

Wat breng je mee?

• Minimaal 5 jaar ervaring als Data Engineer, Data Analist, BI Specialist, Data Architect of vergelijkbare rol;
• Minimaal 3 jaar ervaring met Microsoft Azure;
• Minimaal 3 jaar ervaring met Azure Databricks;
• Diepgaande kennis van ETL-processen en data-integratie;
• Ervaring met datamodellering en data-architectuur;
• Kennis van Azure Data Factory, Azure Data Lake, SQL en Python;
• Sterk analytisch vermogen;
• Proactieve en pragmatische houding;
• Je werkt goed samen en weet vertrouwen op te bouwen;
• Je vindt de balans tussen ideale oplossingen en wat praktisch haalbaar is.

Wat maakt deze opdracht interessant?

Je werkt aan een platform dat direct bijdraagt aan beter datagedreven beleid binnen een maatschappelijk relevante omgeving. Je krijgt ruimte om niet alleen pipelines te bouwen, maar ook mee te denken over architectuur, standaardisatie, governance en de verdere volwassenheid van het dataplatform.
Dit is een opdracht voor een Data Engineer die verder kijkt dan techniek alleen en energie krijgt van het bouwen aan duurzame data-oplossingen met impact.