Description

8+ ans d’expérience en data engineering sur des environnements Big Data (Spark / Scala / Hadoop / Cloud), avec un rôle de référent technique sur des plateformes data industrielles (banque, transport, retail). Spécialisé dans la conception de frameworks génériques, l’industrialisation des traitements et la mise en qualité de la donnée pour le pilotage métier.

Langues

Français
Bilingue ou natif
Anglais
Bilingue ou natif
Arabe
Bilingue ou natif

Préférences en matière de lieu de travail

Accepte de travailler sur site

Paris (jusqu’à 50 km)

RATP
Senior Data Engineer
TRANSPORTS
février 2025 - Aujourd'hui (1 an et 4 mois)
Paris, France
Modernisation du pilotage de la maintenance (GMAO Magellan/Maximo – Direction MRF).
• Conception et développement d'un framework d'ingestion générique Bronze→Silver (Spark/Scala) pour 60+ collections Magellan, piloté par fichiers de configuration.
• Mise en place de la couche Diamond : modélisation des tables de faits et dimensions, construction de timelines métiers (interventions, ressources, gammes, lignes, équipes).
• /Développement des pipelines métiers (interventions enrichies, heures théoriques/réelles, ressources, matière) alimentant les KPI de performance maintenance (IPR / ISE).
• Industrialisation des traitements avec Delta Lake (merge, partitionnement, optimisation, vacuum) et orchestration via DBX Jobs / Asset Bundles.
• Contribution à l'exposition des données vers Power BI et accompagnement des équipes BI sur l'usage des tables Diamond.

Environnements techniques : Databricks, AWS, Spark/Scala, Delta Lake, Giltab, Terraform, Power BI.
Databricks Scala Spark Terraform Cloud AWS
Natixis
Référent Data Engineer – Spark Scala Front Office Desk Pricing Services
janvier 2023 - décembre 2024 (1 an et 11 mois)
Paris, France
• Pilotage du l'équipe Quantitative.
• Développement et intégration d'API
• Intervention dans l'amélioration et la maintenance l'API IEES pour le calcul de la XVA.
• Développement et intégration des API.Net pour la gestion des settings et market Data
• Développement d'un outil avancé pour le calcul de la XVA en s'appuyant sur la grille de calcul DATASYNAPSE
• Automatisation de l'importation des données de marché essentielles au calcul de la XVA via des API .NET
Scala Spark datasynapse singlestore Power BI Desktop
Carrefour
Data Engineer Spark Scala
avril 2022 - décembre 2022 (8 mois)
• Contribution au programme PHENIX de centralisation des données du groupe dans un data lake avec vision temps réel de l'activité.
• Intégration des données dans la data platform GCP et mise en place du monitoring d'intégration
• Développement de connecteurs basés sur des API REST pour l'ingestion de données.
• Participation à la modélisation BigQuery et à l'analyse des anomalies de résultats.
• Développement de fonctionnalités métier en mode agile (Scrum) : extraction, transformation, calcul d'indicateurs, exposition via API REST.