Senior data-engineer

Mijn opdrachtgever is op zoek naar een ervaren Senior Data Engineer voor een contractfunctie . Deze persoon zal de volledige verantwoordelijkheid dragen voor bedrijfskritische dataproducten op hun Azure Databricks-gebaseerde dataplatform . Het betreft een hands-on rol binnen een productteam, waarbij je nauw samenwerkt met productmanagers en senior engineers om de engineeringkwaliteit te verbeteren en de manier waarop moderne dataproducten voor analyses en AI worden ontwikkeld, vorm te geven.

De rol

Als Senior Data Engineer zul je:

• Ontwerp schaalbare dataproducten binnen een multidisciplinair productteam.

• Fungeer als senior technisch partner voor productmanagers en leidende data-engineers.

• Beheer complexe, bedrijfskritische dataproducten van begin tot eind.

• Bouw en onderhoud hoogwaardige datapijplijnen met Databricks en Spark.

• Vertaal de vereisten naar duidelijke technische ontwerpen en conceptuele datamodellen.

• Verwerk grote, complexe datasets en automatiseer handmatige processen.

• Verbeter de datakwaliteit, observeerbaarheid, betrouwbaarheid en leveringsprestaties.

• Bevorder een cultuur van 'eenmaal bouwen, vaak gebruiken' op het hele platform.

• Samenwerken met belanghebbenden om data-gerelateerde technische uitdagingen op te lossen.

• Draag bij aan technische standaarden, best practices en de evolutie van het platform.

• Begeleid andere ingenieurs en verhoog de algemene lat voor ingenieurs.

Technische omgeving

Mijn klant is actief bezig met het moderniseren van hun platform, waarbij ze afstappen van verouderde IaaS-oplossingen en een Databricks-georiënteerd Lakehouse bouwen . Spark, Delta Lake, CI/CD en moderne DevOps-praktijken staan ​​centraal in de manier waarop ze dataproducten ontwerpen en schalen.

Wat je nodig hebt

• Ruime praktijkervaring met Azure Databricks en Spark in een productieomgeving.

• Meer dan 5 jaar ervaring in data-engineering of software-engineering met een sterke focus op data.

• Ervaring met het bouwen van productieklare pipelines op Azure.

• Sterke SQL-vaardigheden en ervaring met analytische datamodellen / datawarehousing.

• Goede beheersing van Python (Scala is een pluspunt)

• Solide technische discipline: CI/CD, testen, Git, DevOps voor data

• Ervaring met het leveren van bedrijfsbrede dataproducten die door meerdere teams worden gebruikt.

• Het vermogen om helder te communiceren met zowel technische als niet-technische doelgroepen.

• Ervaring met Azure Synapse (dedicated/serverless SQL-pools)

• Agile denkwijze; ervaring met werken in Scrum-teams

Goed om te hebben

• Praktische ervaring met Docker , Kubernetes of containerorkestratie.

Contractdetails

• Startdatum: zo snel mogelijk

• Locatie: Londen (met de mogelijkheid tot thuiswerken)

• Duur: 6 maanden (waarschijnlijk verlenging)

• Tarief: Concurrerend, afhankelijk van ervaring