Je vais construire des pipelines ETL de données avec Python pour les data scientists

Certaines informations ont été traduites automatiquement.

Kenya

Je parle Anglais

53 commandes terminées

j'aime regarder nat geo wild et d'autres chaînes sur la nature. j'aime aussi lire des livres et c'est l'une des raisons pour lesquelles j'ai pu exceller dans l'obtention de mon diplôme.
À propos de ce service

Vous avez besoin de déplacer, transformer, nettoyer ou synchroniser des données entre des bases de données, des fichiers ou des API ?

Je vais créer un pipeline ETL/ELT de données fiable utilisant Python et SQL pour transférer des données entre différentes sources et bases cibles.

Je peux concevoir des pipelines simples par lot ainsi que des solutions d’intégration de données plus structurées.

Je peux créer des pipelines pour :

  • PostgreSQL SQL Server
  • SQL Server PostgreSQL
  • MySQL PostgreSQL
  • CSV/Excel base de données
  • API base de données
  • Entrepôt de données
  • Sources multiples de bases de données cible staging
  • Chargement incrémental de données
  • Traitement par lot
  • Nettoyage et transformation de données
  • Détection de doublons
  • Validation des données
  • Gestion des erreurs
  • Journalisation et suivi d’audit

TECHNOLOGIES

  • Python
  • Pandas
  • NumPy
  • SQL
  • PostgreSQL
  • SQL Server
  • MySQL
  • Oracle
  • APIs REST
  • Concepts ETL/ELT
  • Entrepôt de données
  • Tables de staging

Destination Platform:

Snowflake

•

Google BigQuery

•

PostgreSQL

Outils et plateformes:

Google Cloud Dataflow

•

Kafka Connect