ingénieur informatique de données

Il y a 3 semaines

Namur Walloon Region, WAL, Belgique Free-Work Temps plein
Contexte Notre client, acteur majeur du secteur public belge , recherche un Ingénieur de données confirmé (ETL/ELT) pour contribuer à la mise en place et à l’évolution d’un Référentiel des Entreprises Le projet vise notamment à améliorer la qualité, la cohérence, l’unicité et la réutilisation des données , tout en réduisant les duplications et en soutenant le principe « Only Once ». Principales responsabilités
- Concevoir et mettre en œuvre les processus d’intégration, de consolidation et de contrôle qualité des données.
- Définir les mécanismes de génération et de gestion d’un identifiant unique des entreprises.
- Mettre en place les règles de déduplication, de consolidation et de priorisation des sources.
- Définir les mécanismes de gestion des conflits entre différentes sources de données.
- Concevoir et maintenir les chaînes d’alimentation des données à l’aide de la plateforme FME.
- Définir les règles de transformation, normalisation et consolidation des données.
- Mettre en œuvre les connecteurs et flux nécessaires à l’alimentation et à la diffusion des données.
- Garantir la traçabilité des échanges de données et le respect des standards d’architecture.
- Définir et automatiser les règles de Data Quality Management.
- Mettre en place des contrôles de format, complétude, cohérence temporelle, unicité et validation croisée.
- Utiliser FME et DataLift pour les activités d’intégration, de transformation et de contrôle qualité.
- Concevoir des mécanismes de détection des doublons, valeurs aberrantes et incohérences entre systèmes ou sources.
- Contribuer à la définition des indicateurs de qualité des données et des tableaux de bord de suivi.
- Mettre en place des mécanismes de reporting permettant de suivre l’évolution des anomalies et de prioriser les actions correctives.
- Développer des processus automatisés de nettoyage, normalisation, déduplication, enrichissement et correction des données.
- Identifier les causes racines des problèmes de qualité et contribuer à leur résolution à la source.
- Mettre en place un dispositif permanent de monitoring de la qualité des données.
- Suivre les indicateurs d’exactitude, complétude, cohérence, unicité, fraîcheur et conformité.
- Participer à la résolution des incidents techniques liés aux données.
- Documenter les processus et outils afin de faciliter leur maintenance et leur reprise par les équipes internes.
- Accompagner techniquement le raccordement progressif des applications au référentiel.
- Analyser les impacts techniques et fonctionnels des différents raccordements.
- Contribuer à la définition et à l’exécution des scénarios de tests fonctionnels, techniques et d’intégration. Profil candidat:

Profil recherché
Nous recherchons un Ingénieur de données confirmé , disposant d’une solide expérience en intégration de données, ETL/ELT, modélisation et Data Quality. Compétences recherchées
- Une connaissance des principes de gouvernance des données, notamment des référentiels tels que DAMA, est attendue.
- Une expérience confirmée dans l’utilisation des outils ETL et d’analyse de la qualité des données, notamment FME et Talend, est requise.
- Une maîtrise des processus d’analyse et de conception des systèmes de gestion de bases de données est indispensable.
- Une maîtrise confirmée des processus de Data Quality Management est attendue, aussi bien sur le plan théorique que pratique.
- Une expérience en modélisation et conceptualisation des données constitue un atout important.
- Une expérience dans la mise en place de processus de déduplication, normalisation, consolidation et nettoyage des données est recherchée.
- Une bonne compréhension des mécanismes d’intégration de données, ETL/ELT et échanges entre systèmes est nécessaire.
- Une capacité à définir et automatiser des règles de contrôle qualité et de validation des données est attendue.
- Une expérience dans la conception de mécanismes de monitoring, reporting et suivi des indicateurs de qualité est appréciée.
- Une capacité à travailler sur des projets impliquant plusieurs sources de données et différents interlocuteurs métiers et techniques est nécessaire.