À propos de Abderrahmane
Justifiant de 8 ans d'expérience en informatique, dont 6 en Data Engineering, je conçois et déploie des pipelines de données robustes et scalables, transformant des données brutes en insights stratégiques. Mon expertise couvre l'ingestion, la transformation, le stockage et la visualisation des données, en utilisant des technologies cloud et big data.
J'interviens sur les différentes étapes du projet, de la conception au développement et à l'industrialisation.
Je collabore étroitement avec les équipes métiers pour comprendre leurs besoins et fournir des solutions adaptées, tout en assurant la performance, la scalabilité et la fiabilité des systèmes mis en place.
Au cours de mes expériences j’ai développé une expertise sur les technologies cloud et Big Data, mon expertise principale est sur différentes technologies GCP (Bigquery, Dataproc, Cloud Composer GCS) et Spark (Pyspark/Scala).
Français
Bilingue ou natif
Anglais
Bilingue ou natif
Accepte de travailler sur site
Paris (jusqu’à 30 km)
Expériences
- BPCEData EngineerBANQUE & ASSURANCESmars 2023 - décembre 2025 (2 ans et 9 mois)Charenton-le-Pont, FranceProjet Baromètre / Finance– Développement de pipelines pour traiter les opérations de 20M+ cartes de crédit.– Ingestion de données CSV/XLSX et bases externes.– Transformation et modélisation avec Spark Scala, Starlake.ai et BigQuery.– Stockage des données partitionnées en Parquet sur GCS.– Automatisation des traitements d’ingestion et de transformation avec Cloud Composer (Airflow).– Automatisation des transferts vers Azure Blob via Control-M.– Création de cubes analytiques dans Azure Synapse afin d’alimenter Power BI pour la visualisation– Participation active à la chaîne CI/CD: déploiements, tests et mise en production
- Informatique CDCData Engineer ConsultantAGENCE & SSIIoctobre 2021 - décembre 2022 (1 an et 3 mois)Arcueil, FranceDataRisk :- Extraction des données depuis differentes sources (csv, excel, sql, kafka).- Création de l'ingesteur Kafka;- Qualification des données et création des différents datamart.- Déploiement et gestion CI/CD sur les différents environnements.- Migration des composants/applications depuis HDP Hortonworks vers CDP Cloudera. Environnement technique: Hadoop (hortonworks/cloudera), PySpark, Spark Sql, Kafka, Hive (dbeaver), BitBucket, Jenkins, SonarCube.
- ENEDIS (Ex ERDF)Data EngineerENERGIEseptembre 2020 - septembre 2021 (1 an et 1 mois)ODDR :- Développement d'un produit pour les ingestion dans le datalake centralisé.- Collecte des données.- Qualification selon les spécifications métiers.- Mise a disposition sur Hive, et PowerBi.- Tuning et optimisation des jobs Spark.- Automatisation et ordonnancement des jobs. Environnement Technique : Hadoop (Hue), Spark, Scala, Hive, Hbase, Sqoop, SparkSql, Denodo, PowerBi, Agile Scrum.
Recommandations
Soyez le premier à recommander Abderrahmane
Contribuez à la réussite de ce freelance en partageant votre expérience de collaboration avec lui.
Ces profils de freelance correspondent également à vos critères
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Formations
- Master Big Data et fouille de donnéesUniversité Paris 82019Master's degree, Big Data and Datascience
- Master Systèmes intelligents et intelligence artificielleUniversité des Sciences et de la Technologie 'Houari Boumediène'2016
Certifications
- Professional Data EngineerGoogle Cloud Platform
- CRT020: Databricks Certified Associate Spark DeveloperDatabricks