Parcourir les catégories
Explorer
Fiverr Pro
Français
$
USD
Je vais concevoir des solutions d'ingénierie des données avec azure
Scraper web et ingénieur en données
Je possède plus de 4 ans d'expérience professionnelle en web scraping avec Python, ayant créé plus de 300 crawlers personnalisés pour divers sites web. Je maîtrise parfaitement Scrapy, Selenium, Selen...
Niveau 2
Répond à des critères de performance élevés et a fait ses preuves en matière de satisfaction clients.
À propos de ce service
Vous cherchez un ingénieur des données pour construire des pipelines ETL fiables sur Azure ? Je conçois et mets en œuvre des solutions de données de bout en bout en utilisant Azure Data Factory (ADF), Azure Databricks et Medallion Architecture pour ingérer, transformer et gérer vos données efficacement.
Services que je propose :
- Ingestion de données : APIs, CSV, Excel, bases de données, stockage cloud
- Transformation de données : Databricks (PySpark/SQL), flux de données ADF (filtrer, agréger, sélectionner, colonne dérivée, modifier ligne, jointures)
- Pipeline ETL avec Medallion Architecture (Bronze, Silver, Gold)
- Activités ADF : Copier des données, ForEach, Lookup, Web, procédures stockées
- Planification et déclencheurs : basés sur le temps, le stockage ou les événements
Pourquoi me choisir ?
- Solide expertise en ADF et Azure Databricks
- Pipeline ETL optimisés et évolutifs
Outils et plateformes:
Azure Data Factory
•
Autres
Mon portfolio
FAQ
Traduction automatique
De quoi avez-vous besoin de ma part pour commencer ?
J'aurai besoin d'accéder à votre abonnement Azure (ou à un groupe de ressources dédié), de détails sur vos sources de données (APIs, bases de données, fichiers, etc.) et de vos exigences en matière de transformations et de stockage.
Pouvez-vous mettre en place des pipelines ETL simples et complexes ?
Oui ! Je peux construire tout, d'un pipeline ADF basique avec des déclencheurs programmés à des workflows ETL avancés avec Azure Databricks utilisant Medallion Architecture (Bronze, Silver, Gold).
Gérez-vous aussi les transformations de données ?
Absolument. J'utilise ADF Data Flows (filtrer, agréger, jointures, colonnes dérivées, modifier lignes, etc.) et Databricks (PySpark/SQL) pour des transformations personnalisées.
Pouvez-vous intégrer avec mes bases de données ou APIs existantes ?
Oui. Je peux ingérer des données provenant d'APIs, CSV, Excel, bases SQL et stockage cloud dans Azure, en assurant une intégration fluide avec vos systèmes existants.
