Senior data-consultant

Mijn opdrachtgever is een wereldwijd softwareadviesbureau dat organisaties helpt bij het bouwen van moderne digitale producten, het moderniseren van verouderde systemen en het implementeren van sterke engineeringpraktijken om de levering op grote schaal te verbeteren.

Ze zijn op zoek naar een Contract Senior Data Engineer die data-engineering beschouwt als software-engineering; met de nadruk op kwaliteit, bruikbaarheid en onderhoudbaarheid op lange termijn.

Databricks is het belangrijkste platform en er wordt van je verwacht dat je er vloeiend mee werkt, maar de nadruk ligt op het bouwen van robuuste datasystemen in plaats van op toolspecifieke implementatie.

Initiële contractduur van 6 maanden

Wat je nodig hebt

• Sterke ervaring in data-engineering met een solide basis in software-engineering.
• Praktische ervaring met Databricks (Delta Lake, Unity Catalog, Workflows, pipelines)
• Ervaring met architectuur van huizen aan het meer / medaillonhuizen.
• Sterke SQL-, Python- en Spark-vaardigheden
• Bekendheid met dbt, tools voor datakwaliteit en CI/CD-praktijken.

Kern sterke punten

• Het bouwen van testbare, productieklare datapijplijnen.
• Software-engineeringprincipes toepassen op datasystemen.
• Ontwerpen met het oog op observeerbaarheid, herkomst en datakwaliteit.
• Werken in cloudomgevingen (AWS of Azure)

Ervaring met AI/ML-data

• Het bouwen van feature pipelines en datasets die geschikt zijn voor machine learning.
• Ondersteuning voor MLflow-gebaseerde tracking en lineage.
• Ervaring met inbeddings-/ophaalpipelines en vectordataworkflows.
• Vermogen om AI-toepassingen te ondersteunen door middel van een robuuste datafundament.

Samenwerking:

Je werkt nauw samen met engineers, data scientist en stakeholders aan de klantzijde, in een dynamische leveringsomgeving, waarbij je een balans vindt tussen technische kwaliteit en pragmatische besluitvorming.

Typisch werk

• Modernisering en migratie van verouderde datasystemen
• Het bouwen van datafundamenten en feature pipelines die geschikt zijn voor AI.
• Het vanaf de basis integreren van governance, testen en datakwaliteit in platforms.