Senior data-engineer

Mijn klant is bezig met het opschalen van een modern dataplatform en is op zoek naar een Senior Data Engineer met ruime ervaring in Databricks. om deel te nemen aan een Contract van 12 maandenJe werkt aan grootschalige pipelines, event-driven architectuur en cloud-native engineering, waardoor je vaardigheden echt op de proef worden gesteld.

De rol

Je zult ontwerpen, bouwen en optimaliseren. Databricks-georiënteerde pipelines Dagelijks miljarden gebeurtenissen verwerken. Verwacht praktisch werk op diverse gebieden. Python, SQL, Delta Lake, streaming, IaC, CI/CDen de cloud (Azure/GCP). Dit is een contract waarbij je invloed hebt op de architectuur, en niet alleen op het onderhoud ervan.

Je zult werken aan:

• Het bouwen van grootschalige Databricks-pipelines (batch + streaming)

• Spark-taken optimaliseren voor prestaties en kosten.

• Uitvoering Terraform/CloudFormation voor dataplatformcomponenten

• CI/CD-configuratie voor data-applicaties

• Het oplossen van productieproblemen en het implementeren van permanente oplossingen.

• Bijdragen aan technische standaarden op het hele platform.

De ideale kandidaat heeft:

• Ruime ervaring met Databricks en Spark.

• Python + SQL op productieniveau

• Cloudervaring (Azure of GCP)

• Kennis van streaming en event-driven architectuur

• IaC (Terraform/CloudFormation)

• Solide foutopsporing + DataOps-mentaliteit