Data engineer

déposez gratuitement
vos annonces et vos événements

signalez une erreur

informations générales

  • Boulogne-Billancourt

Intégré à l'équipe Data, tu seras responsable de la création des connecteurs de données et de la collecte de données sur BigQuery en utilisant des outils tels que GitHub Actions, Google Cloud Platform (Artifact Registry, Cloud Run, Cloud Scheduler).

Tu travailleras en étroite collaboration avec l'équipe de développement et les autres membres de l'équipe pour développer, tester et déployer des solutions de collecte de données efficaces et fiables
Ce rôle t'offrira une opportunité unique de contribuer à des projets de données d'envergure et de développer des compétences en ingénierie de données et en développement Python dans un environnement professionnel.

Concrètement, tes missions seront les suivantes :

- Créer et maintenir les connecteurs de données nécessaires pour collecter les données à partir de différentes sources vers BigQuery.

- Collaborer avec l'équipe de développement pour concevoir, développer, tester et déployer des solutions de collecte de données basées sur Python et les meilleures pratiques d'ingénierie de données.

- Utiliser les outils de Google Cloud Platform (GCP) tels que Artifact Registry, Cloud Run et Cloud Scheduler pour déployer et automatiser les flux de travail de collecte de données.

- Collaborer avec les autres membres de l'équipe pour comprendre les besoins en données et garantir la qualité, la fiabilité et la sécurité des données collectées.

- Résoudre les problèmes et les défis techniques liés à la collecte de données et aux connecteurs de données, en proposant des solutions et en effectuant des tests pour valider les performances et la qualité des données collectées.

- Documenter les processus de collecte de données, les connecteurs de données et les flux de travail automatisés pour faciliter la maintenance et la compréhension des solutions de collecte de données.

Les + :

- Expérience préalable dans le développement de connecteurs de données ou de flux ETL.

- Connaissance des meilleures pratiques de développement Python, des bibliothèques de traitement de données telles que Pandas, et des outils de développement comme PyCharm ou Visual studio code.

- Expérience avec l'utilisation des services de Google Cloud
En savoir plus sur cette annonce sur le site de notre partenaire

posté par

logo

annonces à proximité

déposez gratuitement
vos annonces et vos événements

signalez une erreur

visiter la commune

Aux alentours