Data engineer

p VDAB zoekt een Data Engineer voor het data intelligence team.

The experience expected from applicants, as well as additional skills and qualifications needed for this job are listed below.

Dit team telt zo'n 40 collega’s.

Zij voorzien interne en externe data gebruikers van oplossingen.

Denk aan management rapportering en business analyse.

Ook leveren ze input voor AI toepassingen.

Je werkt bijvoorbeeld mee aan de transitie van een klassieke data toolset (data warehouse) naar een recenter platform op cloudera technologie (data lake).

/p Functieomschrijving pb Waarom zou de kandidaat voor deze functie moeten kiezen? /b /pp Je komt terecht in een uitdagende omgeving, in een team met een joviale en inclusieve cultuur waar je kan werken met moderne technologie.

Bovendien bouw je mee aan een betere ondersteuning van de Vlaamse arbeidsmarkt /ppem Wat is het doel van de functie ? /em /pulli Je zal een belangrijke rol spelen in een uitgebreide portfolio aan projecten die gepland staan om het bestaande dataplatform te vernieuwen en verder uit te breiden.

/lili Je werkt in een compact agile team met een scrum aanpak.

Je configureert de nodige ELT stromen in DBT en/of NIFI om data te transformeren.

/lili Je voegt data elementen toe aan de datavault met de Vaultspeed automator.

/lili Je stelt dimensionele datamodellen op om de gewenste datasets te ontwerpen.

/lili Je schrijft SQL-queries om de gewenste datasets voor dataproducten te creeëren.

/lili Je test en valideert dataproducten om de kwaliteit en integriteit te waarborgen en testbevindingen op te lossen.

/lili Je documenteert de end-2-end oplossing /lili Je geeft ondersteuning bij problemen, performance issues en werkt mee aan procesverbeteringen- en optimalisaties.

/lili Je verfijnt, samen met de functioneel analist, de gevraagde requirements voor een dataproduct en vertaalt deze naar een concrete oplossing.

/lili Je evalueert de technische haalbaarheid, beheersbaarheid en kostefficiëntie van een dataproduct en stelt hieromtrent verbeteringen voor.

/li /ulpb De 3 belangrijkste verantwoordelijkheden: /b /pulli Correct opbouwen van datapipelines die een oplossing biedt aan de beschreven user story /lili Zorgen dat de geschreven code correct getest en gedocumenteerd is.

/lili Het scrum team versterken door een actief teamlid te zijn.

/li /ulpb Wat zijn de belangrijkste taken? /b /pulli Bouwen van data pipelines in moderne ETL/ELT tools zoals DBT en NIFI /lili Het onderhouden van het data platform van VDAB /lili Schrijven en uitvoeren van unit tests om de gebouwde code te valideren /lili Opvolgen en ondersteunen van de operationele processen in het team, inclusief oplossen van voorkomende bugs /li /ul Profiel pb Vaardigheden /b /pulli Bachelor of gelijkwaardig door ervaring /lili Je hebt minimum 5 jaar praktische werkervaring als data engineer.

/lili Je kan bijvoorbeeld zelfstandig SQL-queries schrijven om testdata te selecteren of flows te begrijpen.

Je kent de componenten en kritische tussenstappen in zowel data warehouse als event-gedreven datastromen.

En je kan documentatie opstellen.

/lili Je hebt aantoonbare ervaring met het maken en ontwikkelen van data pipelines in DBT.

/lili Je hebt kennis van Nifi en Kafka.

/lili Je bent thuis in GIT en weet hoe je metadata kan beheren.

Je hebt ervaring met Hadoop en big data.

/lili Bewezen kennis van CDP (Cloudera dataplatform) in een data analytics context is een troef.

Je kan die kennis staven door de nodige certificaties, relevante ervarin of een speciefiek leertraject.

/lili Je weet hoe datasets performant gemaakt kunnen worden.

/lili Je hebt al kennis gemaakt met data load refresh strategieën en met CI/CD.

/lili Je begrijpt de basisconcepten van Agile en Scrum.

/lili Aantoonbare ervaring met het ontwikkelen van applicaties of services in Python geeft jou net dat streepje voor op de anderen.

/lili Kennis opbouw van een DWH en datamodellering (3e NV, data vault, dimensioneel) /lili Praktische kennis van javascript zien we als een plus /lili Event driven architectuur
- begrijpen wat dit betekent op gebied van data /lili Je bent een echte teamplayer en sparring partner voor de functioneel analist en architecten, waar je sterke communicatieve vaardigheden (in het Nederlands) je helpen.

/lili Je bent proactief ingesteld, houdt van een pragmatische aanpak en vindt het heerlijk na te denken over de data oplossingen van morgen.

/li /ulpb Waar ga je werken /b /pp Je werkt 2 dagen in Brussel, op wandelafstand van het station Brussel Noord.

/ppb Jouw toekomstig team /b /pp40 personen, bestaande uit functioneel analisten, data engineers, front end developers en testers.

/ppb Wat zijn typische projecten van deze functie/afdeling? /b /pp Data integreren in het VDAB da