Parcourir les catégories
Explorer
Fiverr Pro
Français
$
USD
Je vais créer un pipeline ETL automatisé avec AWS lambda, s3 et snowflake
Ingénieur en données spécialisé dans les pipelines ETL et solutions cloud
Ingénieur en données expérimenté spécialisé dans les pipelines ETL, les solutions cloud et l’entreposage de données. Je maîtrise Python, SQL, AWS (Lambda, S3, EC2), Snowflake, Terraform, Apache NiFi, ...
À propos de ce service
Vous cherchez un ingénieur en données professionnel pour construire un pipeline ETL évolutif ? Je vais créer un pipeline de données sans serveur utilisant AWS Lambda, Python et Snowflake pour automatiser vos besoins en intégration de données.
Services de pipeline ETL :
ETL sans serveur avec AWS Lambda et Python
Extraction de données via API, bases de données, CSV ou web scraping
Transformation et nettoyage des données avec Pandas
Chargement dans Snowflake, MySQL, SQL Server, MongoDB
Lac de données AWS S3 avec partitionnement
Planification automatisée avec EventBridge
Gestion sécurisée des identifiants avec AWS Secrets Manager
Gestion des erreurs et surveillance avec CloudWatch
Diagramme d’architecture et documentation
Code source inclus
Pile technologique :
Python | SQL | AWS Lambda | S3 | Snowflake | PostgreSQL | EventBridge | boto3 | Pandas
Pourquoi me choisir :
Plus de 2 ans d’expérience en ingénierie des données
Livraison de pipelines ETL traitant plus de 500 000 enregistrements
Expert en entreposage de données AWS et Snowflake
Code prêt pour la production avec tests
Réponse rapide et communication claire
Idéal pour :
Intégration de données en temps réel, collecte de données via API, migration de bases de données.
Avantages :
Architecture sans serveur, auto-scalabilité, économique, disponibilité de 99,9 %, chiffrement sécurisé.
Contactez-moi avant de commander pour discuter de votre besoin !
Outils et plateformes:
Kafka Connect
•
Apache NiFi
Mon portfolio
FAQ
Traduction automatique
Ai-je besoin d’un compte AWS pour le pipeline ETL ?
Oui, vous aurez besoin d’un compte AWS. Je peux vous guider dans la configuration. Le coût mensuel est généralement de 5 à 20 dollars selon le volume de données. La couche gratuite AWS est disponible pour la première année.
Quelles sources de données pouvez-vous intégrer ?
Je peux intégrer des API REST, des bases de données (PostgreSQL, MySQL, MongoDB, SQL Server), des fichiers CSV, du web scraping, du stockage cloud (S3, Google Drive).
Combien coûte l’exécution d’AWS Lambda ?
Très abordable ! AWS Lambda facture uniquement le temps d’exécution. La plupart des projets coûtent entre 5 et 20 dollars par mois. J’optimise le code pour minimiser les coûts. La couche gratuite couvre les petits projets.
