Je vais construire un pipeline de données Databricks avec pyspark, ETL et spark sql

Certaines informations ont été traduites automatiquement.

Bangladesh

Je parle Anglais

32 commandes terminées

Ingénieur data senior, spécialiste Snowflake et Microsoft Fabric, Databricks

Compétences principales : Snowflake Data Cloud, Microsoft Fabric, ingénierie des données, entreposage de données cloud, pipelines ELT/ETL, PySpark, dbt, modélisation des données, architecture Medallio...

Niveau 1

Répond à certains critères de performance et présente un fort potentiel sur la place de marché.

À propos de ce service

Vous cherchez un expert fiable en Databricks pour créer des pipelines de données rapides, évolutifs et prêts pour la production ? Vous êtes au bon endroit. J’aide les entreprises à transformer des données brutes et désordonnées en ensembles de données propres et prêts pour l’analyse en utilisant Databricks, PySpark, Delta Lake et Spark SQL.

Ce que je propose

  • Des pipelines ETL / ELT de bout en bout dans Databricks
  • Développement et optimisation de PySpark & Spark SQL
  • Architecture Delta Lake / Lakehouse (Bronze, Silver, Gold)
  • Configuration et mise en place de Azure Databricks / AWS Databricks
  • Nettoyage, transformation et migration de données
  • Automatisation des Workflows, Jobs et notebooks dans Databricks
  • Optimisation des performances pour réduire le temps d’exécution et le coût du cluster
  • Connexion aux sources de données : SQL, Snowflake, ADLS, S3, APIs, CSV/JSON/Parquet

Pourquoi me choisir

  • Code propre, bien documenté et réutilisable
  • Livraison à temps avec une communication claire
  • Solutions optimisées pour réduire les coûts de calcul
  • Confidentialité totale et focus sur la satisfaction

Veuillez m’envoyer un message avant de commander afin que je puisse comprendre votre projet et vous proposer une offre personnalisée avec le bon périmètre et le bon prix.

Construisons votre pipeline de données de manière rapide, fiable et évolutive

Plateforme de stockage:

Snowflake

Fabric Warehouse

Databricks

Type de projet:

New Build

Mon portfolio