Senior data-engineer

Senior Data Engineer (actieve SC-veiligheidsmachtiging vereist)
Lokatie: VK (op afstand, af en toe reizen naar Londen) | Vaste aanstelling: £60-£85

Rol overzicht
Ervaren data engineer die samenwerkt met klanten in de publieke sector om productiedataplatformen te ontwerpen, bouwen en beheren. Leidinggevend in de technische architectuur van cloudomgevingen, begeleidend bij projectteams en integreren van analyses en AI-functionaliteiten in agile, klantgerichte projecten.

Belangrijkste verantwoordelijkheden

• Vertaal complexe zakelijke uitdagingen naar schaalbare datapijplijnen, modellen en analyseoplossingen.

• Bouw en beheer productieklare pipelines met behulp van SQL/Python/Spark in lakehouses en event-driven systemen.

• Ontwerp semantische modellen en datavisualisaties voor business intelligence-platformen.

• Implementeer cloudgebaseerde data-/AI-oplossingen (AWS/Azure) met robuuste CI/CD-, test- en beveiligingsprocedures.

• Integreer ML-modellen, experimentele frameworks en beheerworkflows.

• Lever kant-en-klare dashboards, inzichtrapporten en adviesdocumenten aan klanten.

• Werk samen in multidisciplinaire teams in agile, iteratieve leveringscycli.

Technische omgeving
KernGeavanceerde SQL/Python, PySpark/Pandas, Spark-orkestratietools
CloudAWS (vergelijkbaar met Databricks/Redshift), Azure-analyseplatforms, Git/CI-CD
ArchitectuurData lakehouses, event streaming, semantische modellering voor BI-tools
AI / ML: Model-API's, prompt engineering, experimentele frameworks
BestuurGegevenscatalogi, herkomsttracering, beveiliging/toegangscontrole, AVG

Essentiële benodigdheden

• Expertise in SQL/Python voor datamodellering, -transformatie en -automatisering.

• Productiedata-engineering: Spark/PySpark, cloudplatformen (AWS of Azure)

• Ervaring met data-architectuur: lakehouses, event-driven systemen, BI-semantische modellen.

• Software engineering: Git-workflows, CI/CD-pipelines, testframeworks

• Analyse: experimenteel ontwerp, statistische analyse, inzichten delen in verhalen

• Consultancymentaliteit: samenwerking met stakeholders, klantgerichte resultaten, agile levering

• Actieve SC-veiligheidsmachtiging vereist

Wenselijk

• Projectuitvoering in de publieke sector/overheid

• Geavanceerde BI-semantische modellering (equivalenten van Power BI/Tableau)

• Operationele intelligentieplatformen of data mesh-implementaties

• Frameworks voor gegevensbeheer (herkomst/catalogi/toegangsbeheer)