Description

Sénior Data Engineer avec une expertise étendue dans la conception, le développement et la mise en œuvre de pipelines de données à grande échelle. Fortes compétences en ingénierie de données, architecture de données, et technologies Big Data telles que Hadoop, Spark/Scala, Nifi et CI/CD. Expérience avérée dans la gestion d'équipes et la direction de projets, avec une capacité démontrée à transformer les besoins métier en solutions technologiques efficaces. Compétences techniques approfondies combinées à une orientation stratégique pour optimiser les flux de données et maximiser la valeur commerciale. Fort engagement envers la qualité, la sécurité et la conformité des données tout au long du cycle de vie des projets.

Domaines d’expertise

Langues

Français
Bilingue ou natif
Anglais
Capacité professionnelle complète
Arabe
Bilingue ou natif
Espagnol
Notions

Préférences en matière de lieu de travail

Accepte de travailler sur site

Paris (jusqu’à 50 km)

LCL
Référent DATA & Senior Data Engineer
BANQUE & ASSURANCES
novembre 2024 - Aujourd'hui (1 an et 7 mois)
Paris, France
Projet chez LCL : Intervention en transverse et au sein de la squad Finance & Risques Opérationnels pour optimiser les flux Big Data. Contribution à l'évolution des processus sur Teradata, Datastage et un framework interne, avec un focus sur la performance et l’industrialisation.
Missions :
Analyse et étude du besoin.
Rédaction de spécifications techniques détaillées.
Accompagnement des squads métiers (Finance & Risques Opérationnels) dans la gestion et l’exploitation des données.
Conception et développement de la solution.
Conduite des tests unitaires et accompagnement à la recette.
Déploiement via GIT.
Gestion de la version des livrables avec GIT.
Développement de traitement de Back up sous AWS S3.
Participation à l’évolution du socle et architecture technique.
Contribution à l’amélioration et à l’évolution du socle et de l’architecture technique.
Création de scripts automatisés pour simplifier les tâches d'administration courantes.
Configurer des workflows à l'aide de Control M.
Gestion des performances et optimisation de requêtes SQL.
Participation à la révision des rôles et profils de chaque squad.
Surveiller et gérer l'espace de stockage dans le système de fichiers HDFS.
Concevoir et optimiser des requêtes SQL complexes dans Teradata.
Intégrer des données provenant de différentes sources (Mainframe + API) dans Hive.
Mise en œuvre des chaînes d'ingestion, de validation, de croisement, et de déversement de données.
Décommissionnement de datastage.
Assurer la maintenance de la version.
Intervenir dans toutes les phases du projet.
Assister aux différentes cérémonies Agile (Daily meeting / Retro/ Review / Sprint planning).
Encadrer et accompagner la montée en compétences des nouveaux arrivants
Accompagner les métiers dans leurs activités.
Gestion des incidents N2/N3 et anomalie sous Jira.
Rédaction de la documentation sous Confluence.
Création d’un livret d’accueil pour les nouveaux arrivants.
Teradata AWS S3 Big Data Gitlab CI/CD Script Shell
Sofrecom Services
Senior Data Engineer
TÉLÉCOMMUNICATIONS
février 2022 - octobre 2024 (2 ans et 8 mois)
Paris, France
Projet B2B EDH ORANGE : Plateforme pour le programme Big Data B2B d’Orange France, permet la gestion de la relation client, la définition de la stratégie et le développement des marchés et distribution.
Missions :
Analyse et étude du besoin.
Rédaction de spécifications techniques détaillées.
Aider les Data Analyst à identifier des règles de gestion.
Conception et développement de la solution avec Scala Spark.
Conduite des tests unitaires et accompagnement à la recette.
Déploiement via Jenkins et GIT.
Développement de traitement de Back up sous AWS S3.
Configurer et gérer des workflows complexes à l'aide d’Oozie.
Optimisation de requêtes SQL.
Migration des Scripts complexes HQL vers du Scala Spark.
Surveiller et gérer l'espace de stockage dans le système de fichiers HDFS.
Concevoir et optimiser des requêtes SQL complexes dans Hive.
Mise en œuvre des chaînes d'ingestion, de validation, de croisement, et de déversement de données.
Contribution à un projet de migration de pipelines de données existants vers Databricks, incluant l’adaptation des traitements Spark, la gestion des notebook et l’optimisation des performances sur la plateforme.
Mise en place d’un data warehouse moderne sur Databricks (delta Lake) pour centraliser et histories les données métiers.
Développement des pipelines de streaming avec Databricks Structured Streaming pour ingestion et traitement temps réel (Domaine Commande).
Intervenir dans toutes les phases du projet.
Assister aux différentes cérémonies Agile.
Encadrer et accompagner la montée en compétences des nouveaux arrivants
Animer des formations au sein du centre C2S.
Gestion des incidents N2/N3 et anomalie sous Jira.
Rédaction de la documentation sous Confluence.

Environnement Technique :
Scala, Hive, Apache Spark, Méthodes agiles, Databricks, Yarn, Big Data, Scripting SHELL, Oozie, Jenkins, HQL, SQL, Tortoise GIT, CI/CD, AWS S3, NIFI, Fast, JIRA, Confluence.
Scala Spark Hadoop CI/CD HQL
Sofrecom Services
Data Engineer
TÉLÉCOMMUNICATIONS
août 2018 - février 2022 (3 ans et 7 mois)
Casablanca, Maroc
Projet BI-Mobile ORANGE -Equipe BUILD- : Gestion de toutes les données Mobiles
 
d’Orange France, parmi les plus grandes opérations Data Warehouse en Europe.

Missions :
Analyse et étude du besoin.
Rédaction de spécifications fonctionnelles et techniques détaillées.
Rédaction des contrats d’interface.
Conception et développements de la solution.
Conduite des tests unitaires et accompagnement à la recette.
Gestion de la version des livrables avec TortoiseSVN / GIT.
Assurer la maintenance de la version sur 3 mois.
Intervenir dans toutes les phases du projet.
Animation de différentes cérémonies Agile (Daily meeting / Retro/ Review / Sprint planning).
Accompagner la montée en compétences des nouvelles recrues.
Accompagner les métiers et la DSI dans leurs activités.
Porte-parole de l’équipe auprès des équipes support.
Gérer les versions de production et préparer les mises en Prod.
 

Projects :
Réalisation de plusieurs interfaces sortantes depuis le socle BI-Mobile et vues métiers (CIFRA, EPILOG, EWOCS..). [TERADATA V14]
Reuse Orders BIM : Refonte du socle commande BI-Mobile j’ai participé depuis la phase de conception aux développement du socle et les différents vues métiers. [TERADATA V16]
WelcomeSMS Project : Création d’un nouvel ODS avec un Framework basé sur des scripts SHELL qui permet sa maintenance et sa gestion.

Environnement Technique :
SQL, SQL avancé, Scripting SHELL, Dollar Univers, TERADATA V14 et V16, Putty, Tortoise SVN et GIT, JIRA, Utilitaires TERADATA (FASTLoad, MultiLoad, TPump,FASTExport).
Teradata Gitlab CI/CD Script Shell SQL Esprit d'analyse et de synthèse