Je vais créer un bot de web scraping en python pour les sites javascript et les tableaux de bord de connexion

Certaines informations ont été traduites automatiquement.

États-Unis

Je parle Anglais
Je suis un ingénieur en développement de sécurité avec une licence en informatique et sciences de l'information, spécialisé en développement logiciel, conception et développement web.
À propos de ce service

La plupart des gigs de scraping utilisent requests et BeautifulSoup. Cela fonctionne sur du HTML simple et vous donne un fichier VIDE dès qu’un site utilise JavaScript, pagine avec un défilement infini ou se trouve derrière une connexion.


J’utilise un vrai navigateur, donc je vois exactement ce que vous voyez à l’écran.


CE QUE JE GÈRE QUI ÉCHOUE AUX SCRAPERS PAS CHERS

Pages JavaScript / React / Vue qui chargent les données après le HTML

Défilement infini et boutons de chargement

Pagination profonde et flux en plusieurs étapes

Tableaux de bord pour lesquels vous avez un compte mais qui n’ont pas de bouton d’export ni d’API


VOUS OBTENEZ

Vos données en CSV, Excel et JSON

Le script Python commenté, pour que vous puissiez le relancer vous-même

Une courte note d’installation. Pas de boîte noire, pas d’enfermement


VOTRE MOT DE PASSE NE QUITTE JAMAIS VOTRE MACHINE

Pour les cibles protégées par login, je fournis un script que vous exécutez localement avec vos propres identifiants. Je ne demande jamais votre mot de passe.


CE QUE JE NE FERAI PAS

Pas de résolution CAPTCHA. Pas de collecte d’emails ou de numéros de téléphone personnels. Pas de LinkedIn, Facebook ou Instagram. Données publiques ou que vous possédez ou pour lesquelles vous avez un compte. Si votre cible pose problème, je vous le dirai avant la commande, pas après.


Envoyez-moi l’URL et les champs que vous souhaitez, et je vous dirai directement si c’est faisable.

Technologie:

Python

Google Sheets

Excel

Playwright

Pandas

Type d'information:

Veille concurrentielle

Listes

Technique:

Automatisé(e)