Développeur agile, cela fait plus de deux ans que je travaille sur les technos Big Data (framework Hadoop) et des outils d’analyser et visualisation de données. Aussi, je suis très intéressé par Infrastructure As Code et les plateformes analytiques.
Mes principales expertises sont :
⇨ Big Data: Hadoop (Cloudera)/Spark Streaming/Hive/Pig/Flink
Contexte : Au sein d'Orange France, la DREAM (Direction REseAu Mobile) s'occupe de l'infrastructure des réseaux mobiles, elle s'occupe également de la valorisation des données remontant du réseau mobile dans le but de les utiliser au mieux. Les besoins d'Orange pour cette Mission : - Collecter et stocker au fil de l'eau les données (sur un cluster hadoop(cloudera)) 2G, 3G, et 4G sur Hdfs. - Développement des Use case - Mettre à disposition des KPIs(sous forme API et Dashboard) - Assurer une expertise dans l'équipe et accompagner les utilisateurs au changement.
Environnement technique et fonctionnel
BIG DATA (Hadoop, Cloudera, Spark Streaming, Hive, Oozie, Hdfs, Flink, Pig, Oozie)
BI : ElasticSearch, Logstash, Kibana
Système distribué de messages: Kafka
Technologies : Java, service Rest, Python, LOG4J, Script Shell
Outils de développement : Eclipse, Git, Jira
Domaine fonctionnel : réseaux mobiles 2G, 3G, et 4G
Système d’exploitation : Windows, Lunix(redHat/centOS)
Livrables
Package jar du projet (Tests unitaires et logique métier)
Script python de transfert des données vers un cluster