Je vais extraire des données à grande échelle et construire des pipelines automatisés
Développeur Python junior
À propos de ce service
Vous cherchez des solutions de données fiables et évolutives pour votre entreprise ? Je peux vous aider à transformer des données brutes en insights structurés et prêts pour l’analyse.
Avec une expérience pratique dans le traitement de plus de 13 millions d’enregistrements sur des plateformes mondiales, je me spécialise dans la création de pipelines d’automatisation de bout en bout qui fournissent des données propres, utilisables, de manière cohérente et efficace.
Ce que je propose
️ Scraping avancé
- Extraire des données de sites complexes (e-commerce, livraison de nourriture, marketplaces)
- Gérer les systèmes anti-bot, les pages dynamiques et l’extraction à grande échelle
️ pipelines de données automatisés
- Développement de pipelines ETL de bout en bout
- Automatisation planifiée/hebdomadaire (basée sur cron ou cloud)
- Architecture évolutive pour des volumes importants de données
️ Développement d’API
- Créer des API structurées pour servir vos données
- Endpoints rapides, sécurisés et prêts pour la production
️ Nettoyage et transformation de données
- Cartographie de données multiplateforme
- Standardisation pour l’analyse et le ML
- Suppression des incohérences et des doublons
️ Solutions de données personnalisées
- Jeux de données pour le commerce rapide (Inde)
- Scraping e-commerce (Russie et global)
- pipelines d’analyse pour la livraison de nourriture
Mon expérience
- Traitement de plus de 13 millions d’enregistrements pour une plateforme de livraison de nourriture en Arabie Saoudite
- Automatisation de workflows de scraping récurrents pour des plateformes internationales
Technologie:
Python
•
scrapy
•
sélénium
•
Beautiful Soup
•
Pandas
Technique:
Automatisé(e)
