Je vais construire des pipelines ETL en python et automatiser le traitement des données
Ingénieur de données
À propos de ce service
Vous cherchez un ingénieur de données fiable pour construire des pipelines ETL efficaces et automatiser vos flux de travail de données ? Vous êtes au bon endroit !
Je me spécialise en Python, SQL, Azure Data Factory, Azure Data Lake et Databricks (PySpark). Je peux vous aider à construire, configurer et optimiser des pipelines de données qui déplacent, nettoient, transforment et chargent des données provenant de plusieurs sources vers votre destination préférée.
Mes services incluent :
- Développement de pipelines ETL/ELT
- Création de pipelines Azure Data Factory
- Ingestion et intégration de données
- Rédaction et optimisation de requêtes SQL
- Nettoyage et transformation de données
- Traitement de données CSV, Excel, JSON et API
- Intégration Azure SQL et Azure Data Lake
- Documentation et validation des workflows
Pourquoi me choisir ?
- Solutions propres et faciles à maintenir
- Livraison dans les délais
- Communication claire
- Travail bien documenté
- Approche centrée sur le client
Avant de passer commande, veuillez me contacter pour discuter de vos besoins afin que je puisse recommander la meilleure solution pour votre projet.
Outils et plateformes:
Azure Data Factory
FAQ
Traduction automatique
De quelles informations avez-vous besoin avant de démarrer le projet ?
Veuillez partager vos exigences de projet, les détails de la source de données, la plateforme de destination, le résultat attendu et toute documentation ou fichier d'exemple existant. Plus vous fournissez d'informations, mieux je pourrai adapter la solution.
Avec quelles technologies travaillez-vous ?
Je travaille avec Python, SQL, Azure Data Factory, Azure Data Lake Storage, Databricks (PySpark), Microsoft SQL Server, PostgreSQL, MySQL, Excel, CSV, JSON et REST APIs.
Pouvez-vous construire des pipelines ETL personnalisés ?
Oui. Je peux créer des pipelines ETL/ELT en fonction de vos besoins spécifiques, incluant l'extraction, la transformation, la validation et le chargement des données.
Fournissez-vous de la documentation ?
Oui. Je fournis une documentation claire expliquant la solution, le workflow et la configuration, selon le package que vous choisissez.
Mes données resteront-elles confidentielles ?
Absolument. Votre projet et vos données seront traités comme confidentiels et utilisés uniquement pour réaliser votre commande.
Proposez-vous des révisions ?
Oui. Le nombre de révisions dépend du package choisi. Des révisions supplémentaires peuvent également être achetées si besoin.
Dois-je vous contacter avant de passer une commande ?
Oui, je recommande de me contacter avant de commander afin que nous puissions discuter de vos besoins et choisir le meilleur package pour votre projet.
Pouvez-vous travailler avec Azure Data Factory et Databricks ?
Oui. Je peux aider avec les pipelines Azure Data Factory, Databricks (PySpark), le développement SQL, la transformation de données et l'intégration Azure Data Lake.
