Big data engineer

MISSIONS:

- Maintenir notre infrastructure de données en bon état de fonctionnement : gérer les bases de données, les processus et la planification ;
- Assurer la disponibilité constante des données : superviser le traitement, le stockage, l'agrégation, et le développement des API ;
- Apporter des idées nouvelles pour améliorer nos outils et workflows ;
- Proposer des solutions innovantes pour optimiser notre infrastructure de données ;
- Gérer nos algorithmes de data science : veiller à leur évolutivité et bon fonctionnement ;
- Travailler en étroite collaboration avec notre équipe SCRUM ;
- Surveiller l'échelle de nos systèmes de données, en s'assurant qu'ils répondent à nos besoins croissants ;
- Simplifier nos processus de données en intégrant des tests, une surveillance, des alertes et des solutions de récupération des erreurs efficaces.

PROFIL:

Vous serez un bon candidat pour rejoindre l'équipe d'ingénierie chez Adikteev si vous :

- Possédez une expertise solide en Spark, Scala, et en gestion de systèmes de Big Data ;
- Êtes à l'aise avec au moins un des grands clouds (AWS, GCP) ;
- Maîtrisez le streaming de données et la création de data lakes ;
- Connaissez bien les pipelines CI/CD et leurs outils ;
- Utilisez Kafka pour gérer des données en temps réel ;
- Êtes un expert en Python, avec des connaissances en Redis et Cassandra ;
- Avez expérimenté Airflow pour la gestion des workflows ;
- Avez de fortes compétences en résolution de problèmes pour relever des défis complexes ;
- Parlez couramment l'anglais.