Je vais faire du web scraping en Python et constituer des jeux de données pour l'entraînement de l'IA
Spécialiste en web scraping et traducteur professionnel en farsi
Niveau 2
Répond à des critères de performance élevés et a fait ses preuves en matière de satisfaction clients.
Très réactif
Connu(e) pour ses réponses exceptionnellement rapides
À propos de ce service
Web scraping prêt pour l’IA, ingénierie des données et ensembles de données LLM
Les modèles d’IA ont besoin de données propres et structurées. Je crée des pipelines Python évolutifs conçus pour l’affinement des LLM, les workflows RAG et l’intelligence d’entreprise.
Pourquoi me choisir ? Échelle et déduplication : Expérience dans l’analyse de plus d’un million d’enregistrements avec déduplication avancée des entités et zéro bruit. APIs cachées : Ingénierie inverse des points de terminaison internes pour une extraction 10 fois plus rapide. Contournement anti-bot : Cloudflare, CAPTCHA et solutions de proxy rotatif. Formats d’entreprise : Exports propres en JSONL, CSV, SQLite, PostgreSQL ou BigQuery.
Ce que je scrape : Données techniques : Brevets, résumés juridiques, dépôts scientifiques. E-commerce : Catalogues, prix dynamiques et avis. Leads B2B & formation IA : Répertoires, articles et forums.
Le processus :
- Analyser la charge utile et les règles anti-bot.
- Scraping à haute vitesse via Scrapy/Playwright.
- Nettoyer, normaliser et valider le schéma.
- Livraison prête à l’emploi.
Conseil pro : La version premium inclut le contournement anti-bot et la déduplication !
NOTE : Veuillez m’envoyer un message avant de commander.
Technologie:
Python
•
scrapy
•
sélénium
•
Playwright
•
Pandas
Technique:
Automatisé(e)
Mon portfolio
FAQ
Traduction automatique
Q1 : Pouvez-vous scraper des sites web avec protection bot ?
A : Oui. J'utilise des techniques avancées de contournement, notamment les configurations stealth de Playwright, des proxies résidentiels rotatifs premium et des mécanismes de résolution Cloudflare/CAPTCHA pour extraire des données sans être bloqué par des IP.
Q2 : Qu'est-ce que JSONL et pourquoi le proposez-vous ?
A : JSON Lines (JSONL) est le format standard pour la formation et le fine-tuning des LLM (OpenAI, Anthropic, Hugging Face). Chaque ligne est un objet JSON valide, ce qui le rend prêt à être utilisé par le modèle sans surcharge mémoire. Je propose également des exports en CSV, Excel, SQLite ou BigQuery.
Q3 : Votre méthode de scraping est-elle rapide ?
A : Oui. Chaque fois que c'est possible, je reverse-engineer les endpoints API internes et j'utilise des architectures de requêtes asynchrones (Scrapy/Asyncio). Cela évite le rendu lourd par navigateur headless et permet d'extraire des données jusqu'à 10 fois plus vite.
Q4 : Proposez-vous un échantillon gratuit ?
A : Absolument. Envoyez-moi votre URL cible et les champs requis en message privé, et je vous fournirai un échantillon de données de 20 lignes pour que vous puissiez vérifier la structure et la qualité avant de passer commande.
Q5 : Pouvez-vous gérer un scraping à grande échelle (plus d'1 million d'enregistrements) ?
A : Oui. Je suis spécialisé dans l'ingénierie de données à grande échelle. Je construis des pipelines multi-thread robustes avec sauvegarde automatique, déduplication mathématique et streaming direct en batch vers des bases de données pour éviter les fuites de mémoire et la perte de données.
4 avis concernant ce service
| (4) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Détails de la notation
- Niveau de communication avec le freelance
- Qualité de la livraison
- Valeur de la livraison
Trier par
J jim_souther

Canada
The quick turnaround made getting the data I needed easy
3 jours
Durée

F 
Réponse du freelance
Utile?A armenakis

États-Unis
Firoozeh was very responsive and prompt and even did more than I even asked. She gave me a sample to start with to test out whether we were headed in the right direction, which definitely made me feel more confident in the outcome. Highly recommend working with her!
5 jours
Durée
F 
Réponse du freelance
Utile?F finfeet

Italie
She is so dedicated to her job, ver prefessional!
3 jours
Durée
F 
Réponse du freelance
Utile?C cohenboyd

Royaume-Uni
Amazing service, above and beyond to ensure i was happy with the quality, thoroughly recommend
3 semaines
Durée
Utile?
4 avis concernant ce service
| (4) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Détails de la notation
- Niveau de communication avec le freelance
- Qualité de la livraison
- Valeur de la livraison
Trier par
J jim_souther

Canada
The quick turnaround made getting the data I needed easy
3 jours
Durée

F 
Réponse du freelance
Utile?A armenakis

États-Unis
Firoozeh was very responsive and prompt and even did more than I even asked. She gave me a sample to start with to test out whether we were headed in the right direction, which definitely made me feel more confident in the outcome. Highly recommend working with her!
5 jours
Durée
F 
Réponse du freelance
Utile?F finfeet

Italie
She is so dedicated to her job, ver prefessional!
3 jours
Durée
F 
Réponse du freelance
Utile?C cohenboyd

Royaume-Uni
Amazing service, above and beyond to ensure i was happy with the quality, thoroughly recommend
3 semaines
Durée
Utile?

