Je vais construire des pipelines de données ETL ELT avec airflow, spark et sql

Certaines informations ont été traduites automatiquement.

Bangladesh

Je parle Anglais, Bengali, Hindi, Ourdou

Ingénieur analyste de données ETL SQL Python développement web

Ingénieur et analyste de données orienté résultats, spécialisé en ingénierie des données, analyse de données, pipelines ETL/ELT, entreposage de données, web scraping et data mining. Compétent en Apach...
À propos de ce service

Vous recherchez un professionnel en Data Engineering pour construire des pipelines de données évolutifs et automatisés ?

Je me spécialise dans la conception et le développement de solutions d’ingénierie des données de bout en bout, transformant des données brutes en ensembles de données propres, structurés et prêts pour l’analyse. J’aide les entreprises à automatiser le traitement des données, à améliorer leur qualité et à créer des flux de travail fiables.

Mes services incluent :

  1. Développement de pipelines ETL/ELT
  2. Ingestion et intégration de données
  3. Automatisation de workflows avec Apache Airflow
  4. Traitement de données avec Apache Spark
  5. Développement et optimisation SQL
  6. Conception d’entrepôts de données
  7. Mise en œuvre d’Apache Iceberg
  8. Nettoyage et transformation de données
  9. Pipeline batch et en temps réel
  10. Validation de la qualité des données

Technologies :

  1. Apache Airflow
  2. Apache Spark
  3. Python
  4. SQL complexe
  5. Apache Iceberg
  6. Oracle, PostgreSQL, MySQL, MSSQL
  7. Data Warehouse (DWH)

Pourquoi me choisir ?

  • Solutions automatisées et évolutives
  • Pipeline de données fiables
  • Performance optimisée
  • Communication claire
  • Livraison à temps

Que vous ayez besoin de développement ETL, d’automatisation de workflow, de traitement Spark ou d’une solution complète d’entrepôt de données, je peux fournir une architecture robuste et évolutive adaptée à vos besoins.

Destination Platform:

PostgreSQL

mySQL

Amazon S3

Outils et plateformes:

Google Cloud Dataflow

Kafka Connect

Mon portfolio