Description

Développeur Senior DataOps / SRE

Avec plus de 14 ans d’expérience en ingénierie logicielle et infrastructure, je suis spécialisé dans le développement Data et l’automatisation Cloud (DataOps / DevOps / DevSecOps / SRE).

J'accompagne les entreprises dans l'industrialisation et le déploiement de leurs plateformes de données, en appliquant la rigueur du SRE (fiabilité, automatisation, haute disponibilité) au monde du Data Engineering.

Mes domaines d'intervention :

DataOps & Pipelines : Développement, optimisation et sécurisation de pipelines ETL/ELT (Spark, Python) et de flux de données scalables.

Infrastructure as Code (IaC) & Cloud : Automatisation, provisionnement et gestion d'infrastructures cloud (Azure, Terraform).

Orchestration & Conteneurisation : Déploiement et administration de clusters et d'environnements complexes (Kubernetes, Docker).

CI/CD & DevSecOps : Construction de pipelines de déploiement continu et intégration des bonnes pratiques de sécurité à chaque étape.

SRE & Observabilité : Monitoring de la performance, suivi de la qualité des données et maintien en condition opérationnelle des plateformes.

Engagé, pragmatique et orienté performance, je développe des solutions prêtes pour la production, hautement sécurisées et scalables. Discutons de vos besoins !

Domaines d’expertise

Langues

Français
Bilingue ou natif
Anglais
Capacité professionnelle complète

Préférences en matière de lieu de travail

Accepte de travailler sur site

Paris (jusqu’à 50 km), Lille (jusqu’à 10 km), Nice (jusqu’à 10 km), Montpellier (jusqu’à 10 km), Bordeaux (jusqu’à 10 km)

GENERALI
ADMINISTRATEUR BIG DATA
BANQUE & ASSURANCES
mars 2022 - Aujourd'hui (4 ans et 5 mois)
Saint-Denis, France
Au sein de l'équipe Datasmart de la société Generali, qui a pour but l'administration de plusieurs services comme Dataiku, Jupyter, Airflow, Snowflake...
• Administration de la plateforme DATASMAR : Gestion des incidents de production,
Gestion des habilitations et support Métier…
• Migration de la plateforme DATASMART OnPrimise CDH to Cloud Azure CDP.
• Participation aux ateliers avec tous les acteurs de la migration vers la nouvelle plateforme cloud.
• Migration : Des tables HIVE ; les scripts de production, les droits vers Apache Ranger...
• Mise en place d’une solution de backup des données de l’ABFS.
• Post Migration : Gestion des vulnérabilités signalées par le SSI, y compris la priorisation
et la résolution des problèmes de sécurité.
• Administration de la plateforme AKS :
• Migration K8S vers AKS outils et applications web et Spark.
• Tester et maintenir l’image de base Spark Cloudera.
• Mise en place et gestion des : RBAC AKS, la gestion des ressources….
• Migration des pipelines de migration CI /CD GITLAB.
• Migration des images docker de Nexus vers l’ACR, en assurant la conformité et la sécurité des images.
• Implémenter les pipelines de scan Azure Defender et Fortify.
• Administration et support des utilisateurs SNOWFLAKE.
• Participation à l’installation de SNOWFLAKE chez Generali (connexion sso, privateLink…)
• Implémentation d’un outil Snowflake ingest : pour l’ingestion des fichiers plats vers les tables SNOWFLAKE
• Synchro des tables hive vers SNOWFLAKE, avec EventGrid.
• Mise en place d’une solution de connexion SNOWFLAKE par clé, pour Jupyter, Airflow.
• Mise en place d’un Airflow sur la plateforme k8s, pour migrer les applications prod $U vers Airflow.
• Mise en place d’un azure KeyVault.
Python Spark CDP Cloudera Snowflake AKS Kubernetes Dataiku Microsoft Azure Gitlab CI/CD
Société Générale
TECHLEAD BIG DATA
BANQUE & ASSURANCES
mai 2021 - mars 2022 (10 mois)
Paris, France
Au sein de l’équipe carma de Société Générale, le projet DataHubFCCR consistait à collecter, contrôler et exposer des fichiers provenant de diverses entités pour contrôler la conformité des données.
Conception, développement et déploiement des modules pour l’application DataHubFccr.
Contribution au développement d’un système d’automatisation des tests d'acceptation fonctionnels en utilisant Cucumber.
Alimentation des tables de rejets Hive afin de créer des rapports BI Presto.
Accompagner les métiers pour la réalisation des tests sur les différents environnements.
Animer des sessions entre les développeurs pour discuter et proposer des solutions techniques.
Scala Spark Cucumber Hive Cloudera PostgreSQL
Colissimo
Développeur big data
TRANSPORTS
janvier 2020 - avril 2021 (1 an et 4 mois)
Paris, France
Au sein de l’équipe SQUAD 2 de Colissimo (La Poste) qui prend en charge plusieurs applications qui
traite et optimise les données de livraison des colis.
▪ La réalisation de travaux d'implémentation et développement des applications temps réel, Spark
Streaming, Kafka, Cassandra ,Postgres .
▪ La réalisation de travaux d'implémentation et développement d'une application IHM
(PlayFramework, ReacJs)
▪ Exécuter les tests unitaires et d’intégration.
▪ Mettre en place des flux de données entre les systèmes en ingestion et en exposition (batch, API,
temps réel …)
▪ Support aux utilisateurs métiers.
▪ Travailler en modalité Agil.
Spark Scala Apache Kafka Cassandra Kubernetes Docker