Formulaire de recrutement
Senior Data Engineer
--Digipolis Antwerpen AG--
Data & Analytics
Voor de verdere uitbouw en professionalisering van een modern cloud-gebaseerd dataplatform zoeken we een Senior Data Engineer met ruime ervaring in het ontwerpen, bouwen en onderhouden van schaalbare en betrouwbare data-oplossingen.
Binnen deze opdracht werk je mee aan een dataplatform op basis van een moderne data-architectuur, met een sterke focus op Microsoft Fabric, Power BI, Python en het realiseren van grootschalige, robuuste datapijplijnen. Je vertaalt rapporterings- en databehoeften naar robuuste datamodellen, performante pipelines en herbruikbare data-assets die eindgebruikers toelaten om sneller tot betrouwbare inzichten te komen.
We zoeken een zelfstandige professional die niet alleen technisch sterk is, maar ook actief meedenkt over architectuur, data governance, kwaliteit, onderhoudbaarheid en schaalbaarheid. Je werkt nauw samen met analisten, rapporteringsspecialisten, architecten, eindgebruikers en andere stakeholders.
Verantwoordelijkheden
- Ontwerpen, bouwen, optimaliseren en onderhouden van schaalbare datapipelines binnen een moderne cloud data-omgeving.
- Implementeren van data-integraties vanuit diverse bronnen, zoals relationele databases, API’s, bestanden, applicaties en andere databronnen.
- Uitwerken en beheren van lakehouse-, warehouse- en medaillonarchitecturen, met aandacht voor herbruikbaarheid, performantie en datakwaliteit.
- Vertalen van rapporterings- en analysebehoeften naar duidelijke datamodellen en betrouwbare datasets.
- Monitoren, documenteren en verbeteren van bestaande dataflows, pipelines en dataprocessen.
- Zelfstandig opnemen van dataprojecten, van analyse tot implementatie en oplevering.
- Afstemmen met business stakeholders, data analisten, architecten en technische teams over vereisten, oplossingen en opleveringen.
- Actief bijdragen aan standaarden, best practices en kennisdeling binnen het datateam.
Vereisten
- Aantoonbare ervaring als Data Engineer.
- Aantoonbare ervaring met databanken.
- Aantoonbare ervaring met programmeertalen zoals Python, Java of Scala voor het ontwikkelen van datastromen en ETL-processen.
- Aantoonbare ervaring in het ontwerpen en implementeren van Extract, Transform, Load (ETL) processen.
- Vloeiend Nederlands (Europees CEFR niveau C2).
- Aantoonbare ervaring met Microsoft Fabric, specifiek pipelines, dataflows en notebooks.
- Aantoonbare ervaring met cloud-gebaseerde data-architecturen, lakehouse- of warehouseconcepten - Azure.
- Aantoonbare ervaring met data-integratie vanuit meerdere bronsystemen.
- Aantoonbare ervaring met het ondersteunen van rapporterings- en analyticsomgevingen.
- Aantoonbare kennis van SQL en query-optimalisatie.
- Aantoonbare ervaring met CI/CD, versiebeheer en deployment van data-oplossingen.
- Aantoonbare ervaring met medaillonarchitectuur, bijvoorbeeld bronze, silver en gold lagen.
- Aantoonbare ervaring met Spark of Spark-gebaseerde verwerking.
- Aantoonbare kennis van data governance, data quality management en lineage.
- Aantoonbare kennis van datamodellering volgens de Kimball-methodologie.
- Aantoonbare kennis van lakehouse-, datamesh- of domein-georiënteerde data-architecturen.
- Aantoonbare ervaring binnen een publieke, stedelijke of complexe enterprise-omgeving.
- Aantoonbare ervaring met Python binnen data engineering context.
- Aantoonbare ervaring met PowerBI.