Data engineer

Contexte :
Nous recherchons un Data Engineer Big Data pour rejoindre l'équipe data de notre client. Vous serez responsable de la conception, du développement et de la gestion de pipelines de données à grande échelle, en vue de soutenir les initiatives stratégiques de notre entreprise en matière de data.

Responsabilités principales :

Concevoir, développer et maintenir des architectures de données Big Data sur des plateformes comme Hadoop, Spark, ou autres outils de traitement distribué.
Gérer l'intégration de sources de données diverses (structurées et non structurées) dans un entrepôt de données centralisé.
Optimiser les processus de traitement de données pour améliorer la performance et l'efficacité des systèmes.
Collaborer avec les équipes de Data Science et d'Analytique pour mettre en place des solutions adaptées à leurs besoins.
Assurer la qualité et la gouvernance des données tout au long de leur cycle de vie.
Développer des solutions pour automatiser la collecte, le nettoyage et la transformation des données.
Compétences recherchées :

Maîtrise des technologies Big Data : Hadoop, Spark, Kafka, BigQuery, PySpark ( indispensables)
Solides compétences en programmation (Python, Scala, Java, etc.).
Expérience avec les bases de données NoSQL (Cassandra, MongoDB, etc.) et les systèmes de gestion de données distribuées.
Compétences en gestion de données dans l'environnements cloud GCP.
Bonnes capacités de communication pour travailler en collaboration avec d'autres équipes techniques et non techniques.
Profil recherché :

Bac+5 en Informatique, Data Science, ou domaine similaire.
Expérience de 3 ans minimum en tant que Data Engineer, idéalement dans un environnement Big Data.
Sens de l'analyse, autonomie, et esprit d'équipe.