Vous souhaitez suivre cette formation ?

Contactez-nous ! Un expert vous recontactera dans les plus brefs délais.

Les 4 derniers articles du blog

Comment une PME peut accéder aux financements OPCO en 2025 ?

Découvrez comment les PME peuvent profiter des dispositifs de financement OPCO en 2025, les démarches à suivre, les conditions d’éligibilité, et des conseils pratiques pour optimiser l’accès aux fonds de formation professionnelle.

Allan Busi

30 juin 202412 min

Quelles seront les 10 pédagogies incontournables en 2025 ?

Découvrez les 10 méthodes pédagogiques les plus innovantes et efficaces qui vont façonner la formation professionnelle en 2025.

Allan Busi

30 juin 202412 min

Quel sera l'impact sur l'avenir de l'emploi en 2025 ?

Découvrez comment l'avenir de l'emploi en 2025 sera affecté par l'innovation technologique, la transition écologique, la mutation des compétences et l'émergence de nouveaux métiers.

Allan Busi

30 juin 202412 min

Comment réussir son orientation professionnelle en 2025 ? Conseils et stratégies actualisées

Découvrez les meilleures pratiques, outils numériques et conseils d’experts pour réussir votre orientation professionnelle en 2025, à l’ère des nouvelles tendances et de la transformation du marché du travail.

Allan Busi

30 juin 202412 min

Voir tous les articles

Objectifs de la formation

Comprendre l’architecture et le fonctionnement du framework Scrapy

Développer des spiders pour l’extraction ciblée de données web

Structurer, nettoyer et stocker des données extraites en formats exploitables (CSV, JSON, bases de données)

Gérer l’extraction de volumes élevés de données tout en respectant l’éthique et la légalité du scraping

Automatiser le scraping, gérer la pagination, les formulaires et les sites complexes (JavaScript, authentification, etc.)

Mettre en place des solutions robustes pour l’anti-bot, throttling, proxies et limitations techniques

Programme

Jour 1Introduction au scraping et à Scrapy : bases et premiers spiders

Vue d’ensemble du scraping et des cas d’usage, installation de l’environnement, compréhension du projet Scrapy, création de spiders simples, exploration des pipelines et middlewares.

Jour 2Extraction avancée, gestion des structures complexes et de multiples pages

Techniques de ciblage d’éléments HTML (XPath, CSS selectors), gestion de la pagination, scraping de listings, manipulation des formulaires, extraction de données dynamiques (sites nécessitant une interaction), stockage des résultats (JSON, CSV, bases SQL).

Jour 3Automatisation, robustesse et éthique du scraping professionnel

Gestion des limites (rate limiting, politess policies, robots.txt), mise en place de proxies et d’anti-bots, détection et résolution des blocages, monitoring des spiders, bonnes pratiques et législation en matière de données collectées. Exemples concrets de projets professionnels et atelier pratique guidé.

Méthode d'évaluation

Étude de cas réelle à conduire en mini-projet (réalisation d’un spider Scrapy pour un site imposé)
QCM final sur l’utilisation avancée de Scrapy
Évaluation continue pratique à chaque module par des exercices progressifs

Méthode d'apprentissage

Exposés théoriques interactifs avec démos en direct
Nombreux exercices pratiques et études de cas
Livret pédagogique complet et code source fourni
Accès au code et aux ressources sur un dépôt privé

Chargement en cours...

Vous souhaitez suivre cette formation ?

Les 4 derniers articles du blog

Comment une PME peut accéder aux financements OPCO en 2025 ?

Quelles seront les 10 pédagogies incontournables en 2025 ?

Quel sera l'impact sur l'avenir de l'emploi en 2025 ?

Comment réussir son orientation professionnelle en 2025 ? Conseils et stratégies actualisées

Maîtriser l'extraction de données sur le web avec Scrapy : Techniques avancées pour le scraping professionnel

Objectifs de la formation

Programme

Méthode d'évaluation

Méthode d'apprentissage

Ces formations pourraient vous plaire

Maîtriser Scrapy : Formation complète à l’extraction de données web en Python

Analyse et Extraction de Données Web avec BeautifulSoup : Maîtriser le Web Scraping en Python

Maîtrisez le Web Scraping avec BeautifulSoup : Techniques et Bonnes Pratiques

Maîtriser spaCy : Traitement Avancé du Langage Naturel en Python