You're seeing this page as if you were . The main menu is still yours, though. Exit from immersion
Yassir IdhbiYI

Yassir Idhbi

Supermalter

Senior Cloud Data Engineer Ops - Spark Python AWS

700 €/jour
2 projets
Grenoble, FR
3-7 ans

Délai de réponse moyen : 1h

À propos de Yassir

Ingénieur diplômé de l'ENSIMAG, j'interviens principalement sur des problématiques de Data plateformes sur AWS et j'ai eu la chance d'accompagner plusieurs entreprises dont startup, scaleup, ou grand groupes, dans plusieurs secteurs d'activités (Banques, transport, santé) et différents contextes métiers.

Certifié AWS Developer Associate et Data Engineer Associate, je peux vous accompagner à mettre en place des pipelines de traitement de données performants sous l'écosystème AWS et vous orienter vers les services et les technologies qui conviennent le plus pour votre cas d'usage et de votre contexte.

Mes sujets de prédilections :
  • ETL
  • Datalake / Data Lakehouse
  • APIs
  • Clean Code
  • Infrastructure as Code
  • CI/CD

  • Français

    Bilingue ou natif

  • Anglais

    Bilingue ou natif

Accepte de travailler sur site
Grenoble (jusqu’à 50 km), Lyon (jusqu’à 50 km)

Expériences

  • Bpifrance
    Data Engineer / Tech Lead
    BANQUE & ASSURANCES
    avril 2023 - Aujourd'hui (3 ans et 2 mois)
    Paris, France
    • Moderniser les projets Python en ajoutant un Dependency Manager (Poetry), des Linters, Formatters etc, pour unifier les outils des développeurs et faciliter leur travail
    • Rendre plus robustes les Pipelines CI/CD sur Jenkins en ajoutant des vérifications de la qualité de code et tests unitaires avant tout déploiement
    • Maintenance du code Spark d'ingestion et de transformation des tables.
    • Refactoring du code pour le rendre plus testable et réutilisable
    • Moderniser la partie stockage de données de la plateforme en passant du CSV vers du Parquet et Iceberg
    • Développer un connecteur DataGalaxy qui permet d'ajouter le Lineage des tables dynamiquement en utilisant OpenLineage.
    • Développement de connecteurs pour l'outil de gestion de pilotage Anaplan qui permettent d'extraire/intégrer automatiquement des fichiers de/vers AWS en utilisant l'API Anaplan.
    Spark Amazon Web Services Apache Iceberg Terraform Anaplan
  • Free2Move
    DataOps/Data Engineer
    TRANSPORTS
    mai 2022 - avril 2023 (1 an)
    • Construire l'infrastructure AWS pour une pipeline de streaming avec un large volume de données (EMR, Kinesis, S3, Lambda)
    • Création et maintenance des pipelines CI/CD du projet (Terraform, Spark sur Scala, Lambdas sur Python)
    • Maintenance du code de l'application principale en Spark Streaming
    • Développement d'une Lambda pour surveiller des aspects métiers avec de l'alerting sur Google Chat
    • Mise en place de Dashboards pour surveiller la charge de l'infrastructure (EMR, Kinesis, S3,...) sur Grafana
    AWS EMR AWS Kinesis Terraform Scala Spark
  • SANOFI
    Data Engineer
    INDUSTRIE PHARMACEUTIQUE
    avril 2021 - mai 2022 (1 an et 1 mois)
    Grenoble, France
    • Maintenir et améliorer les jobs Spark (Scala) d'ingestion dans la plateforme
    • Maintenir l'orchestration des pipelines avec Stepfunctions et Lambdas (Python)
    • Améliorer la lisibilité du Catalog de la plateforme en mettant en place un outil qui facilite l'ajout de metadata dans le catalog Glue de la plateforme à partir d'un fichier de configuration
    • Enrichissement des tests unitaires et des tests E2E de la plateforme et l'ensemble de la Codebase
    • Maintenir et améliorer les pipelines CI/CD de la plateforme
    • Maintenir l'infrastructure AWS as code (Cloudformation)
    Python Apache Spark AWS CloudFormation Scala Amazon Web Services

Recommandations

Ces profils de freelance correspondent également à vos critères

AgathaA

Agatha Frydrych

Backend Java Software Engineer

4.7

(3)

2

BaptisteB

Baptiste Duhen

Fullstack developer

4.6

(4)

5

AmedA

Amed Hamou

Senior Lead Developer

4

(2)

7

AudreyA

Audrey Champion

Web developer

4.3

(3)

4

Formations

  • Diplôme d'ingénieur, Ingénierie des Systèmes d'Information
    Grenoble INP - Ensimag
    2019
    Diplôme d'ingénieur, Ingénierie des Systèmes d'Information

Certifications

Compétences

Catégories