À propos de Bassirou
Spécialisé dans les projets de migration de données, j'ai mené avec succès plusieurs migrations d'infrastructures on-premises vers le Cloud et vice versa, ainsi que des transitions entre diverses technologies de données. Mon expertise inclut la migration de pipelines de données, de processus ETL et d'outils d'orchestration, ce qui a permis de réduire les coûts de manière significative, d'au moins 30 % dans mes projets précédents.
Je possède de solides compétences en Cloud (GCP, AWS), SQL, DBT, Python, Scala, Spark et pipelines de streaming (Kafka, PubSub).
Je rends vos pipelines de données robustes, rapides et économiques grâce à ma compréhension approfondie des systèmes de bases de données, mon approche pilotée par les tests et l'automatisation via CI/CD. Je suis orienté business, prenant en compte les besoins métiers pour créer les meilleures solutions.
Compétences clés :
- Migration de données : On-premises vers Cloud, Cloud vers on-premises, transitions technologiques (par exemple, Spark vers DBT, Nifi vers Airflow)
- Technologies de données : Apache Spark, DBT, Apache NiFi, Kafka, Apache Airflow, Dataproc, Hive, HDFS
- Cloud : GCP, AWS, Cloud Run, AWS Lambda
- Langages de programmation : Python, Scala, SQL, Java
- CI/CD & Automatisation : Gitlab CI/CD, Github Action, Ansible, Jenkins, Terraform
- Visualisation de données : Power BI, Qlik
- Gestion de bases de données : BigQuery, Cassandra, Solr, MongoDB, ElasticSearch
- Traitement en batch et en temps réel avec Spark, DBT, Kafka, PubSub
- Architecture de données
- Modélisation de données
Français
Bilingue ou natif
Anglais
Capacité professionnelle complète
Accepte de travailler sur site
Paris (jusqu’à 50 km), Nantes (jusqu’à 50 km), Rennes (jusqu’à 50 km), Lyon (jusqu’à 50 km)
Expériences
- LegallaisSenior Data EngineerBTP & CONSTRUCTIONnovembre 2023 - février 2024 (3 mois)Caen, FranceObjectif de la mission : Mise en place des flux d'ingestion et de traitement des données Legallais via NIFI, Spark, Airflow pour alimenter le Datalake sur Google Cloud Platform et Qlik pour la Data Visualisation.Réalisations :
- Ingestion des sources de données via NIFI dans le Datalake au format Parquet.
- Implémentation des premiers tests unitaires du code Spark avec la librairie Scalatest.
- Configuration des applications Spark dans différents environnements (dev et prod).
- Mise en place de l'ensemble du flux Logistique avec la création des modèles pour la visualisation des données.
- Planification des tâches à l'aide d'Airflow Python.
- Implémentation d'une bibliothèque Airflow pour gérer les lancements de clusters.
- ORANGESenior Data EngineerTÉLÉCOMMUNICATIONSmai 2024 - Aujourd'hui (2 ans et 1 mois)Issy-les-Moulineaux, FranceObjectif de la mission : Migrer from scratch tous les pipelines de données de Cloudera Hive, HDFS, Hadoop vers GCP BigQuery, DBT, GCS, Composer (Airflow), PubSub.Réalisations :
- Acquisition de données sources avec Cloud Function, PubSub, GCS.
- Implémentation d'un pipeline de routage avec Airflow (Python) pour router les fichiers sources vers les projets de destination.
- Développement d'une librairie Python pour charger des données dans BigQuery selon les cas d'utilisation.
- Écriture de DAGs Airflow en Python pour planifier les traitements de données.
- Transformation des données brutes en data marts avec DBT.
- Développement de pipelines CI/CD avec GitLab CI/CD.
- Automatisation de la build des ressources GCP avec Terraform.
- Collaboration étroite avec le métier afin de mieux cerner les besoins et proposer des solutions adaptées.
- KeringKering Big Data DeveloperLUXEdécembre 2020 - avril 2024 (3 ans et 5 mois)Paris, FranceObjectif de la mission : Mise en place des flux d’ingestion et de traitement de données via NIFI, Spark, Kafka, Airflow, exposées dans des caches (Cassandra, Solr) à travers une API (Node.js).Réalisations :
- Migration des traitements vers le Cloud AWS.
- Traitement en lots et en temps réel via Kafka et Spark.
- Déploiement des applications Spark en temps réel avec Jenkins.
- Anonymisation des informations clients conformément au RGPD.
- Automatisation et intégration continue
Recommandations
Ces profils de freelance correspondent également à vos critères
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Formations
- Classe préparation ScientiqueINSA Hauts de France2016
- Ingénieur en Informatique Option Big DataInstitut National des Sciences Appliquées (INSA) de Rennes2019
Certifications
- Google Cloud Professional Data EngineerGoogle2021