Senior Data Engineer
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Hoe ziet jouw dag eruit?
Als Senior Data Engineer maak je deel uit van het data team dat verantwoordelijk is voor de implementatie van het gemeenschappelijk dataplatform bij een klant die een belangrijke speler is in de sociale zekerheid voor de domeinen werkloosheid, loopbaanonderbreking en tijdskrediet.
Je combineert een analytische aanpak met technische expertise om transformation pipelines te ontwerpen, te bouwen en te onderhouden. Je bent actief betrokken bij de ingestion fase van de data lifecycle —van allerlei source systemen naar het Data Platform, die gebruikt maakt van de medallion architecture — en het verwerken van de gegevens in de eerste twee zones van het lakehouse.
Samen met de data analytics engineers binnen het team zorg je voor de orchestration opdat data accuraat, toegankelijk en afgestemd is op de noden van de organisatie.
Je werkt op een pragmatische en Agile manier.
Je taken:
- Ontwikkelen van gelaagde transformation logic met dbt, gericht op onderhoudbaarheid, prestaties en kostenefficiëntie
- Configureren van source-to-target mapping om ruwe data om te zetten in Data Vault-componenten (incl. hubs, links, satellites and PIT tables)
- Automatisch genereren van Data Vault-structuren met VaultSpeed
- Opzetten van orchestration van data workflows met Dagster voor betrouwbare en tijdige levering
- Uitvoeren van de nodige validatie testen om de kwaliteit en bruikbaarheid van datasets te garanderen
- Trouble-shooten van issues en performance bottlenecks om de data pipelines te optimaliseren
- Samenwerken via Git en CI/CD pipelines voor versiebeheer en continue integratie