Je vais automatiser votre pipeline de données et votre ETL avec Python et SQL
Data scientist certifié SAP : SAP Datasphere, Power BI et Python
À propos de ce service
Vous passez des heures chaque semaine à nettoyer, fusionner et vérifier les mêmes données ? Je vais les remplacer par un pipeline fiable en Python et SQL.
Je suis un data scientist certifié SAP à Sydney. Dans mon rôle actuel, je conçois des validations et une gouvernance automatisées des données en Python et SQL pour des ensembles de données de 200 000 à 400 000+ lignes, dans plusieurs organisations de vente internationales, et j'ai créé des intégrations d'analyses de paiement et des flux de données REST API en tant que freelance.
Ce que vous obtenez :
- Un code Python (Pandas) et SQL propre, modulaire, et non une solution ponctuelle
- Des vérifications automatiques de la qualité des données qui signalent les problèmes avant qu'ils n'apparaissent dans les rapports
- La sortie vers votre base de données, Excel/CSV, ou un tableau prêt pour Power BI
- Un README, des instructions d'exécution et un contrôle de version Git
Jobs typiques : consolidation de feuilles de calcul, nettoyage d'exportations ERP ou CRM, extraction de données API programmée, validation de données produits ou fournisseurs, préparation de données pour tableaux de bord ou modèles.
Envoyez-moi un exemple de vos données (des données fictives suffisent) et la forme finale souhaitée, et je vous confirmerai le bon package.
Basé en Australie (AEST) : délai rapide en AU/NZ, progression nocturne pour les États-Unis et le Royaume-Uni.
Destination Platform:
PostgreSQL
•
Serveur Microsoft SQL
Outils et plateformes:
Microsoft SSIS
•
Autres
Autres services de Data engineering I Offre
FAQ
Traduction automatique
Où le pipeline sera-t-il exécuté ?
Votre choix : votre propre machine, un serveur ou un environnement cloud que vous contrôlez. Je fournis des instructions claires pour la configuration et la planification, et j'évite le verrouillage à mes propres comptes.
Pouvez-vous extraire des données d'une API ?
Oui. La formule standard couvre les extractions API simples ; la formule Premium couvre les API authentifiées avec pagination et gestion des erreurs. Partagez la documentation API avant de commander.
Dans quel format le code est-il livré ?
Scripts ou notebooks Python plus SQL. La formule Premium est livrée sous forme d'un dépôt Git versionné avec tests et README.
Conservez-vous des copies de mes données ?
Non. Je supprime les données de travail à la fin et je suis prêt à signer un NDA.
