- Postes vacants:
- 1 poste ouvert
- Type d'emploi désiré :
- CDI
- Experience :
- 3 à 5 ans
- Langue :
- Français, Anglais
Description de l'emploi
Pour l’un de nos clients grand compte, nous cherchons un architecte/tech lead Big Data avec au moins 3 ans d’expériences sur les distributions Hortonworks et Cloudera.
La mission consiste au pilotage technique de la migration de tables Hive, Hbase et plus que 500 traitements Spark (Java, Scala et Python) qui s’exécutent d’une façon quotidienne sur un cluster Cloudera CDH sur serveurs physiques vers la nouvelle version Cloudera CDP sur ces mêmes serveurs. Il s’agit en premier lieu de comprendre et d’analyser l’existant, d’identifier les changements nécessaires pour le bon fonctionnement de l’ensemble des cas d’usage et de piloter leur mise en oeuvre avec l’équipe des data Engineers ainsi que l’équipe IA.
La mission est longue et d’autres projets arrivent juste après la migration.
Exigences de l'emploi
Le candidat doit avoir au moins une expérience dans le pilotage technique/architecture de projets Big Data ainsi que des connaissances solides en Hadoop, Hive, Spark, Sentry/Ranger, Kafka, HBase et SolR. Des connaissances en gouvernance de données avec Atlas sont aussi souhaitables.
Un bon sens de communication et d’analyse des besoins est aussi recommandé.
Date d'expiration
16/05/2021