Cloud Data Engineer met Azure & Databricks certificeringen

Opmerking: Enkel kandidaten gevestigd in België komen in aanmerking

Jouw rol binnen Data Engineering & Applicatieontwikkeling

• Ontwerpen, ontwikkelen, testen en onderhouden van schaalbare data engineering oplossingen op Microsoft Azure en Databricks.
• Bouwen van robuuste en herbruikbare ETL/ELT pipelines met Python, PySpark, Scala en SQL.
• Ontwikkelen van dataverwerkingsapplicaties voor ingestie, transformatie, verrijking, validatie en het beschikbaar stellen van analytische datasets.
• Implementeren van betrouwbare batch- en streaming data workflows met Azure Databricks, Delta Lake en moderne data lakehouse patronen.
• Bijdragen aan applicatieontwerp, codekwaliteit, prestatieoptimalisatie en onderhoudbaarheid van data engineering oplossingen.
• Ontwikkelen van herbruikbare bibliotheken, utilities, frameworks en technische componenten om de levering van dataproducten te versnellen.

Vereiste kwalificaties

• Meer dan 5 jaar praktijkervaring in data engineering, applicatieontwikkeling of cloud-gebaseerde dataplatformontwikkeling.
• Sterke praktijkervaring met de ontwikkeling in:
  • Python
  • PySpark
  • Scala
  • SQL
  • ETL/ELT ontwikkeling
• Gedegen ervaring met het Azure Databricks ecosysteem, inclusief:
  • Databricks notebooks en jobs
  • Spark clusters
  • Delta Lake
  • Lakehouse architectuur
  • Prestatie tuning en optimalisatie
• Ervaring met het ontwerpen, ontwikkelen en operationeel houden van productie data pipelines.
• Goede kennis van Azure data services zoals:
  • Azure Data Lake Storage
  • Azure Data Factory
  • Azure Key Vault
  • Azure DevOps
  • Azure monitoring/logging functionaliteiten
• Ervaring met CI/CD pipelines, bij voorkeur met Azure DevOps YAML pipelines.
• Sterk begrip van software engineering praktijken, inclusief versiebeheer, geautomatiseerd testen, modulair ontwikkelen en code reviews.
• Begrip van cloudbeveiliging, toegangsbeheer, observability en kostenbewuste ontwikkelingspraktijken.
• Werkkennis van Terraform of infrastructure-as-code concepten is een pluspunt, maar niet de primaire focus van de rol.