Je vais construire un scraper web ou un pipeline de données avec des rapports programmés

Vérifier les prix des concurrents, le stock des fournisseurs, les annonces ou les registres publics à la main chaque matin est un travail qu'une machine devrait faire à 5 heures du matin à votre place.

Je crée des scrapers et des pipelines de données qui collectent selon un calendrier, conservent l'historique (tendances, pas seulement des instantanés) et livrent sous forme de digest email, feuille de calcul ou tableau de bord selon votre façon de travailler.

Une chose que je fais différemment : délimiter les preuves. Si le système ne peut pas vérifier un chiffre, il le signale au lieu de deviner. Vous recevez des rapports sur lesquels vous pouvez agir, pas des rapports qui ont l'air bien.

Je gère l'ingestion de données programmée à partir des API de Google chaque jour sur ma plateforme de production, c'est ce que je fais pour moi-même, et je le propose sous forme de service pour vous.

Note : je ne scrape que des données légales à collecter, comme des données publiques, vos propres comptes ou des sources pour lesquelles vous avez une licence. Si votre cas d'usage est dans une zone grise, je vous le dirai avant que vous dépensiez un dollar.