Xavier P.

expert node.js, web scraping, automatisation

Peut se déplacer à Paris, Paris, Nancy, Strasbourg

15 missions

(12 avis)

Tarif indicatif 650€ / jour
Consultez le niveau d'expérience, la disponibilité et le temps de réponse de Xavier

Proposer un projet La mission ne démarrera que si vous acceptez le devis de Xavier.

Localisation: Paris, France

Peut travailler dans vos locaux à

Paris et 50km autour
Paris et 100km autour
Nancy et 100km autour
Strasbourg et 100km autour

Durée de mission

≤ 1 semaine
≤ 1 mois
entre 1 et 3 mois
entre 3 et 6 mois

Charte du freelance Malt signée
Consulter la charte
E-mail vérifié

Xavatar

45 Followers
6 Repos
0 Gists

user170412

27 Réputation
4 Bronze
0 Argent
0 Or

Data Engineer

Databases
MongoDB
Elasticsearch
MySQL
Architecture
API

Gagnez du temps grâce à l'automatisation : restez focus sur les tâches à valeur ajoutée !

Développeur et ingénieur back-end, je propose audits et expertise en Automatisation et Web Scraping pour vos besoins en:

automatisation des tâches répétitives et chronophages
extraction données
création base de données
génération fichiers de leads
développement moteur de recherche full-text
Growth Hacking

Je fais aussi des formations / initiations :

Web Scraping
Node.js / Puppeteer
MongoDB
Apache SOLR
Formation Growth Hacking
PhantomBuster

Je mets en oeuvre des robots de web scraping sur mesure pour:

scraper des profils de réseaux sociaux
extraire les données de contacts de sites annuaires
collecter les prix de fiches produits de N sites (veille tarifaire)
récolter les données d'annonces immobilières / automobiles
scraper les avis/reviews de consommateurs
automatiser la recherche de données depuis formulaires complexes
enrichir des données existantes via API

Je conçois des architectures de scraping full stack distribuées avec entre autre:

Node.js
Headless Chrome + Puppeteer
MongoDB
RabbitMQ
SOLR / ElasticSearch
GraphQL
API
Electron
React
Vue.js

Les robots d'extraction de données sont personnalisés selon les structures des sites et des données. Toute action humaine est automatisable: étapes de login, infinite scroll, gestion pagination, clics sur boutons, filtres, ...

Pour comprendre vos besoins d'extraction de données, en vue d'un devis / audit, doivent être identifiés:

1: les sources: sites à partir desquels sont extraites les données
2: le chemin de navigation: cheminement depuis la page d'accueil pour arriver aux données (clics sur catégories / menu, gestion pagination, etc)
3: la liste des données à extraire
4: le format du livrable des données extraites: JSON, CSV
5: fréquence des automatisations si scraping nécessitant des MAJ + extractions de données régulières

Consultez la description complète de Xavier

Portfolio uniquement accessible aux membres

Coopaname/ Jennifer Palmer

Intervenant formation Lead generation avec PhantomBuster

Paris, France

janvier 2020 - janvier 2020

Formation personnalisée 1-to-1 à l'automatisation du processus de génération de leads à l'aide PhantomBuster + Dropcontact.

Bruno

Backend Node JS Crawling / Scraping / Alerting

Nancy, France

novembre 2019 - novembre 2019

A partir d'un cahier des charges déjà bien étoffé et pré-établi, j'ai eu pour mission de:

proposer une architecture de web scraping / extraction de données automatisée, avec des choix de techno. pertinentes vis à vis des besoins exprimés
mettre en oeuvre la stack de web crawling / web scraping de données, où l'extraction automatisée des données est déclenchée suite à la réception d'alertes spécifiques via API
développer, tester, et déployer les scripts Node.js correspondants sur les instances de serveurs AWS dédiés

Scraping
Collecte de données
JavaScript
Web Scraping
Node.js
API
MongoDB

L'Oréal Produits de Luxe France - L'Oréal Groupe

Automatisation veille disponibilité stocks produits, et envoi fichier récapitulatif quotidien

Paris, France

octobre 2019 - novembre 2019

Dans le but de pouvoir détecter les indisponibilités de stocks de certains produits de luxe depuis leurs fiches produits, j'ai mis en oeuvre l'automatisation quotidienne de l'extraction des informations telles que: Code EAN, prix, dispo stock, marque, depuis un site e-commerce spécifique.

Le résultat concret étant un fichier Excel avec les EANs et dispo. stocks de chaque produit, envoyé chaque jour au responsable des commandes de ces produits.

Versailles Voyage

Enrichissement de données OpenStreetMap avec API Nominatim

Paris, France

octobre 2019 - octobre 2019

Versailles Voyage

Extraction d'un important jeux de données depuis l'API Overpass (OpenStreetMap API)

Paris, France

octobre 2019 - octobre 2019

Apprentissage et analyse de la documentation d'OpenStreetMap + API Overpass
Ecriture et tests de requêtes Overpass QL en vue du requêtage de l'API Overpass
Extraction d'importants jeux de données d'OpenStreetMap via l'API Overpass et des requêtes Overpass QL spécifiques
Développement du script Node.js d'interrogation de l'API Overpass + stockage en base de données (MongoDB), conversation des données JSON en CSV

Collecte de données
Node.js
API
Data Extraction
Overpass API
OpenStreetMap
Overpass QL

Versailles Voyage

Audit pour la création d'une base de données des zones côtières dans le monde

Paris, France

septembre 2019 - septembre 2019

Le challenge ici était d'identifier la meilleure source en vue de la création d'une base de données de lieux très spécifiques. La "meilleure source" tant d'un point de vue pertinence, que facilité d'exploitation, et qualité/exhaustivité des données. Pour ce travail, j'ai étudié, analysé et décortiqué l'API Overpass afin de pouvoir extraire des données de Open Street Map, en testant divers requêtes via l'interface Web de Overpass Turbo.

Collecte de données
Node.js
API
Data Extraction
OpenStreetMap
Overpass
Overpass Turbo
NodeJS
Voir plus de compétences
Voir moins

E-Motion

Automatisation extraction de données candidats en recherche d'emplois, et scraping CV depuis sites RH

Paris, France

janvier 2019 - janvier 2019

Dans le but de faire de l'analyse sémantique de profils de chercheurs d'emplois et de CV de candidats disponibles sur plusieurs plateformes RH utilisées par les recruteurs, j'ai mis en oeuvre une architecture de scraping full-stack, afin d'automatiser la récupération des informations de ces profils de chercheurs d'emplois.

Le livrable final étant les scripts déployés sur le cloud et les données mises à disposition via API.

Étapes:

Analyse des sites et de leurs comportements
Analyse faisabilité technique
Proposition d'une architecture d'automatisation de scraping des données + mise à disposition via API
Développement des robots d'extraction de données
Déploiement des scripts sur le cloud (serveurs distants)
Développement de la couche API pour consommation des données
Tests et fix bugs

RabbitMQ
Puppeteer
Node.js
MongoDB
Web Scraping
Droplets
Cloud computing
Git
Voir plus de compétences
Voir moins

Humind School

Meetup Initiation Web Scraping & Growth Hacking

Paris, France

octobre 2018 - octobre 2018

Meetup à destination des étudiants, employés de startups, aspirants entrepreneurs ou freelancers qui souhaitent recevoir une introduction au Growth Hacking en B2B.

Derrière ce terme controversé se cachent l'ensemble des pratiques (data, design, produit, acquisition...) qui visent à créer de la croissance de manière scalable sur le long terme en B2B. Une discipline à la croisée du Marketing, du Business Development et du Sales.

Evénement divisé en deux blocs :

L'approche growth hacking B2B : définition de l'ICP (Ideal Customer Profile) et de la value proposition, framework AARRR et mise en place d'une Sales & Marketing machine (process, outils & metrics) - par François Fillette, CEO @Humind School

La technique growth hacking B2B : scraping de données et construction d'une base de propsects qualifiés. Aucun pré-requis en code n'est nécessaire - par Xavier Prud'homme, CTO @Ghostscrapper

Ironhack Paris

Meetup initiation: Data Scraping for non dev : build a qualified e-mail base

Paris, France

juillet 2017 - juillet 2017

How to use Data Scraping to build a qualified e-mail base ?

Xavier, together with Boris Tchangang, Freelance Scraping Expert & Growth Hacker, will first give you data scraping best practices, tips and tools, and show you how to extract e-mail with practical cases. Then, to put all this theory in action, they will help you apply what you just learnt to build your own e-mail base.

No need to know how to code to come to this event : methods and tools used will be accessible to everyone

VELUX France

Extraction de listes de contacts depuis sites annuaires

Nancy

septembre 2018 - septembre 2018

Analyse de la structure des sites ciblés
Analyse de la faisabilité technique
Implémentation du robot d'extraction de données, propre aux sites ciblés
Extraction des données de contacts au format CSV/Excel

Scraping
Collecte de données
Headless Chrome
Node.js
Puppeteer
MongoDB

E Motion Analysis

Expertise et consulting amélioration requêtes MongoDB et indexation Apache SOLR

Paris, France

octobre 2017 - octobre 2017

Audit, étude et analyse de la structure des divers collections de la base de données MongoDB, ainsi que des divers requêtes non optimisées ayant un gros impact négatif sur la rapidité/performance de l'application web.
Conseils et aide à l'implémentation d'un moteur de recherche "full text" de type Apache SOLR.

PHP
Collecte de données
Apache Solr
MongoDB
JavaScript
Node.js
puppeteer

By 3S

Agrégation d'une base de données de produits pharmaceutiques

Nancy, France

mai 2017 - mai 2017

Agrégation d'une base de données de produits pharmaceutiques depuis sites e-commerce, avec structuration des informations en provenance des fiches produits (prix, désignation, référence, ean, caractéristiques, marque, image...)

CasperJS
Veille tarifaire
Scraping
Collecte de données
MongoDB
Data Extraction

Cook Angels

Extraction de données (informations et coordonnées) en provenance de 9 sources web différentes.

Nancy, France

janvier 2017 - janvier 2017

Extraction de données relatives aux coordonnées et caractéristiques de professionnels sur une verticale bien précise, à partir de 9 sources web différentes.

Gestion des divers structures de pages rencontrées, extraction, normalisation et uniformisation des données extraites.

PHP
CasperJS
PhantomJS
Scraping
Collecte de données
GhostJS
Data Extraction

Massi Sadadou

Agrégation d'une base de données de caractéristiques automobiles

Nancy, France

octobre 2016 - novembre 2016

Extraction de l'intégralité des caractéristiques de l'ensemble des modèles de voitures, sur toutes les marques connues, à partir d'une source web.

PHP
CasperJS
Scraping
Collecte de données
GhostJS
Data Extraction
JavaScript

GhostScraper

CTO

Nancy, France

janvier 2012 - Aujourd'hui

Expertise en web scraping/collecte de données, constitution de base de données sur mesure à partir de sources multiples (agrégation des données en provenance de plusieurs sites web), uniformisation, structuration, croisement, enrichissement et nettoyage des données.

Expertise également en automatisation des actions/comportement utilisateur sur pages web: recherches, remplissages formulaires, clicks, navigation web, simulation web browser.

Scraping
Collecte de données
Veille concurrentielle
Automatisation
MongoDB
Puppeteer
web scraping
Node.js
Voir plus de compétences
Voir moins

Wizome

CTO

Nancy, France

décembre 2008 - avril 2016

Co-fondateur, Dirigeant et Responsable technique, en charge du développement de la plateforme de veille tarifaire "TrackMyCompetitors" et des robots de scraping.

Veille concurrentielle
Veille tarifaire
Scraping
Collecte de données
Python
Apache Solr
PhantomJS
PHP
MongoDB
CasperJS
GhostJS
Voir plus de compétences
Voir moins

Altion Ltd

Ingénieur développeur de modules applicatifs PL/SQL et Java, PHP, pour plateformes d'inventaires réseaux utilisés par les opérateurs de téléphonie mobile.

Dublin, Ireland

septembre 2007 - octobre 2008

Consulter toutes les expériences de Xavier

Qualité
Respect des délais
Communication

Consultez les avis de fin de mission de Xavier

ScrapingExperts

2 membres

Groupes freelances uniquement accessible aux membres

Xavier P.

expert node.js, web scraping, automatisation

Localisation et déplacement

Préférences

Vérifications

Influence

Langues

Catégories

Compétences (22)

Xavier en quelques mots

Portfolio