Youssef E.

 Analyse et conception : Participation aux ateliers métiers, recueil des besoins fonctionnels, rédaction et affinage des user stories. Design et développement d’applications Big Data, réalisation de POCs et d’études de faisabilité technique.

 Développement et déploiement : Implémentation des traitements PySpark, orchestration des chaînes de traitement avec Airflow et Oozie, réalisation des tests unitaires et d’intégration, packaging des applications au format DAR, et déploiement automatisé via la chaine CI/CD (Jenkins / XL Deploy) sur les environnements dev, rec, int et prod.

 Gestion des évolutions : Chiffrage des évolutions, études d'impact, et migrations technologiques.

 Support et assistance aux utilisateurs : Prise en charge des incidents, support technique et accompagnement des équipes métier pendant les phases de recette.

 Méthodologie Agile : Participation aux rituels Scrum (daily meetings, affinages, revues de backlog, démos, rétrospectives, plannings).

Evolution du SI Big Data :

 Définition et implémentation de solutions techniques Big Data pour les différents usecases.

 Conception, développement, déploiement et optimisation des nouvelles évolutions et du MCO.

 Implémentation de pipeline pour la collecte, l’acquisition, l’intégration et le traitement de différents types de données (temps réel, différées).

 Développement des scripts :

o Python/Shell pour l’acquisition des données à partir des APIs et des webservices.

o Spark/Scala pour l’intégration et la transformation des données dans MongoDB.

o Jenkins pour l’automatisation, l’orchestration et la planification des traitements.

 Enrichissement des bonnes pratiques de développement dans le domaine du Big Data.

 Administration de l'environnement Big Data dans le Cloud Azure Microsoft (Datalake, clusters Hadoop Hortonworks, supervision des services et des VMs Spark via Ambari).

 Réalisation et maintien de la documentation technique.

Migration PaaS et Projets :

 Migration de l’écosystème Hadoop, Jenkins (IaaS) vers un environnement cloud Azure (PaaS) avec du Databricks, Data Factory, DevOps, Data Lake Storage Gen2, Delta, …

 Schéma de collecte : Un processus d’intégration des factures EDI (Electronic Data Interchange) des différents fournisseurs (EDF, ENGIE, TotalEnergies, …) et des factures comptables, pour GLP.

 Intégration des factures pour chaque couple Client/Fournisseur : CDC, CD13, CD59, VFSB, …

 Intégration des données des distributeurs (GRDF, ENEDIS, SUEZ) :

o GAS (API Rest GRDF ADICT)

o Electricity (API Soap Enedis) / Portail SGE

o Water (API Rest Suez)

 API Rest Objenious (LoRaWAN) : Plateforme IoT pour remonter les données des capteurs (Ambiance : Présence, Luminosité, Température, Humidité). Etude de migration vers Orange.

Mise en place du projet BI et Big Data sur le périmètre RAF (Recouvrement Amiable et Forcé)

- Réalisation des POC sur le périmètre RAF.

- Développement des flux d'alimentation de Data Lake à partir des données sources.

- Construction des Faits et des agrégats à partir des données du Data Lake.

- Participation aux ateliers fonctionnels et techniques avec les métiers, les CSR, la MOA et les MOE pour la préparation des DSF et DST.

- Création des jobs Datastage pour alimenter les tables ODS, Socle, BMD (Base Métier Détail) puis BMA (Base Métier agrégée).

- Réalisation des patchs, Livraison en validation (va et v2), Recette, Rédaction du dossier de mise en production et Validation du livrable avec l’équipe d’exploitation.

Management et Gestion de projet sur le périmètre RAF

- Chiffrage et planification des différentes évolutions et anomalies.

- Alimentation du suivi de chantier, Partage sur l'avancement, Positionnement des jalons et Respect des échéances.

- Assistance à l’expression de besoins, Rédaction des DST, Suivi des développements, Livraison en intégration, Test d’intégration, Relecture de code, Validation des développements, Vérification de la qualité des livrables, Respects des normes, Amélioration de la qualité des composants des patchs de livraison et Prise en charge et intervention sur des développements complexes.

- Animation des réunions : Un point de suivi quotidien avec les développeurs et un point de suivi hebdomadaire avec les métiers, les CSR, la MOA et les MOE sur l’avancement des travaux.