Je vais créer un scraper web Python personnalisé avec logique de retry et sortie propre

Vous n'avez pas seulement besoin de données, vous avez besoin d'un scraper Python que votre équipe peut exécuter, modifier et planifier elle-même.

Je rédige du code de scraping prêt pour la production, pas des scripts jetables.

CE QUI LE REND PROFESSIONNEL :

Code modulaire (fetch / parse / pagination en fonctions séparées)

Logique de retry avec backoff exponentiel pour gérer les réseaux instables

Parsing sécurisé avec types (int/float/None), pas des chaînes brutes

Limitation de la vitesse de scraping polie, User-Agent personnalisé, respect du fichier robots.txt

Gestion d'erreurs propre, une mauvaise ligne ne fera pas planter l'exécution

README complet + requirements.txt pour un déploiement facile

CE QUE JE DEMANDERAI AVANT DE COMMENCER :

1. URL(s) cible(s)

2. Champs à extraire

3. Format de sortie préféré (CSV / Excel / JSON)

4. Si vous allez le relancer vous-même

Je vous enverrai un exemple fonctionnel dans les 24 heures pour vous assurer que tout est en bonne voie.

PORTFOLIO (open source) :

- Scraper de catalogue e-commerce de 1000 enregistrements (BeautifulSoup + pagination)

- Scraper de statistiques sportives paginées de 582 enregistrements (Session + logique de retry + double export)

Les deux sur GitHub : github.com/atul487

Envoyez-moi l'URL et je vous dirai si c'est un travail d'une journée ou un projet d'une semaine. Gratuitement.