Data engineer

déposez gratuitement
vos annonces et vos événements

signalez une erreur

informations générales

ACTIVITES PRINCIPALES :

1. Gouvernance des données
- Mettre en place et maintenir les règles de gouvernance des données : garantir la qualité, la sécurité, et la conformité des données selon les normes internes et les réglementations (ex. : RGPD).
- Assurer la gestion des accès et des droits aux données, afin que les utilisateurs métiers puissent accéder aux informations pertinentes tout en respectant les règles de sécurité.
- Documenter et communiquer les politiques de gestion des données à travers l'organisation pour garantir une utilisation cohérente et conforme des données.

2. Exploitation et gestion de l'entrepôt de données
- Gérer l'entrepôt de données centralisé, garantissant que les données sont organisées, accessibles et optimisées pour répondre aux besoins des utilisateurs métiers.
- Surveiller et améliorer la performance de l'entrepôt de données, en optimisant les requêtes, en gérant les partitions et en veillant à l'intégrité des données stockées.
- Coordonner l'intégration des données entre les différents systèmes au sein de l'entrepôt, pour assurer une vision unifiée des données.
- Concevoir et développer des cubes de données en collaborant avec le Data Analyst dans l'entrepôt de données afin d'optimiser les analyses métiers. Ces cubes permettront une structuration des données adaptée aux besoins d'analyse et aux indicateurs de performance définis par les métiers.

3. Développement et mise en place de flux ETL
- Concevoir et développer des flux ETL pour automatiser l'intégration des données dans l'entrepôt à partir de diverses sources internes et externes, tout en assurant leur nettoyage, transformation et chargement.
- Chaque flux de données devra être géré via des processus ETL pour garantir que toutes les données transitent par le centre de données centralisateur.
- Développer des interfaces via des ETL ou des scripts pour connecter les API externes (par exemple, se connecter à des bases de données externes ou des services d'opendata), permettant d'enrichir les données internes de l'organisation.
- Travailler sur des développements spécifiques pour traiter des cas plus complexes comme des agrégations de données, des fusions de sources de données multiples, ou des calculs avancés en fonction des règles métiers.

4. Maintenance et suivi des flux de données
- Surveiller les performances des pipelines ETL et des flux de données en temps réel pour s'assurer qu'ils fonctionnent de manière optimale.
- Mettre en place des systèmes de monitoring pour détecter les éventuelles erreurs dans les flux et les corriger rapidement, afin de garantir la continuité des opérations et la fiabilité des données.
- Maintenir la documentation technique pour chaque flux ETL mis en place, facilitant ainsi la maintenance et l'évolution des processus.

5. Veille technologique et innovation
- Effectuer une veille technologique sur les nouvelles solutions et outils de gestion des données (Big Data, Cloud, Data Lakes) et proposer des évolutions pertinentes pour anticiper les futurs besoins.


AVANTAGES :
- RTT
- Carte ticket Restaurant
- Mutuelle & Prévoyance d entreprise
- CSE

Ce poste peut être basé à Mulhouse, Epinal, Metz, Reims ou Nancy.

POSTE OUVERT AUX PERSONNES EN SITUATION DE HANDICAP
En savoir plus sur cette annonce sur le site de notre partenaire

posté par

logo

annonces à proximité