Je vais créer un script python pour faire du web scraping, parser, extraire, convertir, transformer et charger des données

Je peux travailler avec des sites web publics, des API, des fichiers CSV ou Excel, JSON, XML, flux de données, bases de données et d'autres sources structurées ou semi-structurées auxquelles vous avez l'autorisation d'accéder.

Oui. Je peux extraire des données de nombreux sites web rendus avec JavaScript ainsi que d’APIs publiques ou autorisées. Envoyez la cible ou la documentation pour que je puisse évaluer le flux de travail.

Je peux fournir des fichiers CSV, Excel, JSON, XML, SQL ou tout autre format convenu, et je peux charger le résultat dans une base de données ou une autre destination supportée.

Oui. Je peux traiter la pagination, les pages de catégories, les APIs et les grands ensembles de données après avoir examiné la structure de la source, le volume, la fréquence de mise à jour et le taux de requêtes autorisé.

Non. Je travaille avec des données accessibles au public ou des systèmes pour lesquels vous avez l’autorisation d’accéder. Je ne contourne pas les CAPTCHAs, paywalls ou contrôles d’accès.

Envoyez la source de données ou l’URL de la cible, les champs requis, le résultat ou la destination souhaitée, le volume approximatif, les règles de transformation, la fréquence d’exécution et un échantillon si disponible.

Oui. Je peux valider, normaliser, dédupliquer, mapper, filtrer, fusionner, remodeler et convertir les données avant de les exporter ou de les charger dans la destination convenue.

Oui, sauf si nous convenons d’une livraison uniquement des données. Je fournis un code source Python propre et des instructions pratiques pour l’exécuter et le maintenir.

Choisissez Basic pour une tâche simple à source unique, Standard pour un flux de travail plus large ou dynamique ou jusqu’à deux sources, et Premium pour plusieurs sources complexes ou une automatisation programmée.