Vous souhaitez suivre cette formation ?

Contactez-nous ! Un expert vous recontactera dans les plus brefs délais.

Les 4 derniers articles du blog

Comment le CPF Transforme le Développement Personnel en 2025 ?

Découvrez comment le Compte Personnel de Formation (CPF) révolutionne le secteur du développement personnel en 2025, en donnant accès à de nouvelles compétences, une meilleure employabilité et un épanouissement global.

Allan Busi

30 juin 202413 min

Comment obtenir et optimiser le financement OPCO des TPE en 2025 ?

Découvrez un guide pratique et à jour pour comprendre, solliciter et maximiser le financement OPCO dédié aux TPE en 2025. Toutes les étapes, conseils et nouveautés à connaître pour financer vos actions de formation.

Allan Busi

30 juin 202414 min

Comment réussir sa pédagogie en 2025 ? Stratégies et piliers clefs pour les formateurs professionnels

Découvrez les meilleures pratiques de pédagogie professionnelle en 2025 : digitalisation, individualisation, engagement et évaluation active pour garantir la réussite de vos apprenants.

Allan Busi

30 juin 202413 min

Comment former efficacement dans une TPE en 2025 ?

Découvrez les stratégies, outils et conseils pour mettre en place une formation professionnelle efficace au sein d’une TPE en 2025, malgré les contraintes de temps, de budget et de ressources.

Allan Busi

30 juin 202412 min

Voir tous les articles

Objectifs de la formation

Comprendre les principes de l’extraction web (web scraping)

Installer et configurer Scrapy dans un environnement Python

Construire des spiders pour extraire des données structurées de sites web

Gérer les requêtes, le suivi d’état, la pagination et la navigation sur plusieurs pages

Mettre en place des pipelines d’export (CSV, JSON…), nettoyage et transformation des données extraites

Respecter les bonnes pratiques et les règles d’éthique du scraping

Déployer et maintenir des projets Scrapy à long terme

Programme

Jour 1Fondamentaux du web scraping & prise en main de Scrapy

Introduction au web scraping : usages, légalité, éthique. Présentation de Scrapy et installation. Structure d’un projet Scrapy : spiders, commandes de base, crawl simple. Exploration de documents HTML avec XPath et CSS selectors.

Jour 2Développement avancé de spiders et gestion des données

Extraction approfondie de données : requêtes personnalisées, gestion des liens (Follow), pagination, navigation inter-pages. Manipulation d’items et pipeline : nettoyage, transformation et validation des données. Export des données vers CSV, JSON, base de données.

Jour 3Optimisation, respect du web, déploiement et automatisation

Gestion et contournement des restrictions (User-Agent, gestion des erreurs, contrôles anti-bots, politesse). Implémentation du throttling. Introduction à l’utilisation des middlewares, proxies, rotating user-agent et systèmes de cookies. Packaging et déploiement d’un projet Scrapy. Introduction à Scrapy Cloud et à l’automatisation via crontab ou Jenkins. Revue des bonnes pratiques, veille et mises à jour.

Méthode d'évaluation

Étude de cas pratique (réalisation d’un spider complet sur un site web donné, extraction et transformation des données)
QCM intermédiaires d’évaluation des connaissances à chaque fin de journée
Corrections collectives des exercices

Méthode d'apprentissage

Alternance d’exposition magistrale et d’exercices en direct sur Scrapy
Exercices pratiques : création de spiders, extraction de données sur des sites réels pour divers usages
Support de cours numérique à jour et documentation technique partagée
Accès à un espace d’échanges entre participants

Chargement en cours...

Vous souhaitez suivre cette formation ?

Les 4 derniers articles du blog

Comment le CPF Transforme le Développement Personnel en 2025 ?

Comment obtenir et optimiser le financement OPCO des TPE en 2025 ?

Comment réussir sa pédagogie en 2025 ? Stratégies et piliers clefs pour les formateurs professionnels

Comment former efficacement dans une TPE en 2025 ?

Maîtriser Scrapy : Formation complète à l’extraction de données web en Python

Objectifs de la formation

Programme

Méthode d'évaluation

Méthode d'apprentissage

Ces formations pourraient vous plaire

Maîtriser l'extraction de données sur le web avec Scrapy : Techniques avancées pour le scraping professionnel

Analyse et Extraction de Données Web avec BeautifulSoup : Maîtriser le Web Scraping en Python

Maîtrisez le Web Scraping avec BeautifulSoup : Techniques et Bonnes Pratiques

Maîtriser Stable-Baselines3 : Implémenter l’Apprentissage par Renforcement en Python