Je vais concevoir un scraper web Python fiable et un script d'automatisation de données

Certaines informations ont été traduites automatiquement.

Chine

Je parle Chinois, Anglais, Japonais

Systèmes embarqués, automatisation Python et développeur frontend

Je conçois des solutions pratiques embarquées et logicielles pour prototypes, automatisation et interfaces web. Mon travail principal inclut le firmware STM32 en C/C++, FreeRTOS, acquisition ADC et ca...
À propos de ce service

Vous avez besoin de données structurées fiables provenant de sites web publics ?

Je vais créer ou améliorer des scrapers Python et des scripts d'automatisation de données en utilisant Requests, BeautifulSoup, Scrapy, Selenium ou Playwright lorsque l'automatisation du navigateur est nécessaire, et Pandas pour le nettoyage et l'exportation.

Les services incluent :
Pages statiques, pagination et pages de détails ; données de produits, actualités, listes ou annuaires ; sortie en CSV, Excel, JSON ou prête pour une base de données ; nettoyage, déduplication et validation des données ; logique de nouvelle tentative, limitation du taux et gestion des erreurs ; exécutions programmées ou répétables ; débogage de scrapers existants ; documentation et instructions d'installation.

Avant de commander, veuillez envoyer les URL cibles, les champs requis, un exemple de sortie, le volume et la fréquence attendus, les accès nécessaires, le format préféré, l'environnement d'exécution et la date limite.

Je ne travaille qu'avec des données auxquelles vous êtes autorisé à accéder. Je ne contourne pas les CAPTCHAs, paywalls, contrôles d'accès ou la sécurité du site, et je ne collecte pas de données personnelles ou sensibles interdites. Les workflows de connexion autorisés peuvent nécessiter une étape de connexion manuelle.

Technologie:

Python

scrapy

Beautiful Soup

Playwright

Pandas

Type d'information:

Listes

Nouveautés et événements

Technique:

Automatisé(e)

Mon portfolio