Web scraping avec python

Ryan Mitchell

349 pages, parution le 05/12/2024

Ajouter à une liste

Expédié sous 24h

Livraison à partir de 0,01€ dès 35€ d'achats
Pour une livraison en France métropolitaine

Retrait à la librairie - Paris 5e

Disponible dès demain

QUANTITÉ

Résumé

Un guide complet pour extraire presque tous les types de données du Web moderne avec le langage Python.

Si on peut considérer la programmation comme quelque chose de magique, alors le web scraping s'apparente assurément à de la sorcellerie ! En écrivant un simple programme automatisé en Python, vous pouvez envoyer des requêtes à des serveurs web, y rechercher des données et les analyser pour extraire les informations dont vous avez besoin.
Voici un guide complet pour extraire presque tous les types de données du Web moderne.
La première partie du livre se concentre sur les mécanismes de web scraping : utiliser Python pour demander des informations à un serveur web, effectuer une gestion de base de la réponse du serveur et interagir avec les sites de manière automatisée. La deuxième partie explore une variété d'outils et d'applications plus spécifiques pour s'adapter à tous les scénarios de web scraping que vous êtes susceptible de rencontrer.
Analyser des pages HTML compliquées
Développer des crawlers avec le framework Scrapy
Découvrir des méthodes pour stocker les données que vous récupérez
Lire et extraire des données à partir de documents
Nettoyer et normaliser les données mal formatées
Lire et écrire en langage naturel
Parcourir les formulaires et les identifiants
Scraper JavaScript et explorer les API
Utiliser et écrire un logiciel de conversion d'images en texte
Éviter les pièges et les bloqueurs de bots
Utiliser des "scrapers" pour tester votre site web

Sommaire

1. Fonctionnement d'Internet
2. Questions de légalité et d'éthique liées au web scraping
3. Applications du web scraping
4. Écrire votre premier web scraper
5. Analyse HTML avancée
6. Créer des web scraper
7. Modèles d'exploration Web
8. Utiliser Scrapy
9. Stocker des données
10. Lire des documents
11. Gérer les données incorrectes
12. Lire et écrire en langage naturel
13. Parcourir les formulaires et les identifiants de connexion
14. Web scraping avec JavaScript
15. Exploration des API
16. Traitement d'images et reconnaissance de texte
17. Éviter les pièges
18. Tester votre site Web avec des scrapers
19. Web scraping en parallèle
20. Proxys de web scraping