Je vais construire un pipeline ETL géospatial

Certaines informations ont été traduites automatiquement.

Pakistan

Je parle Anglais

Ingénieur en données et ML

Je suis ingénieur en data et ML avec plus de 5 ans d'expérience dans la création de pipelines ETL pour diverses sources de données, notamment géospatiales, financières et de santé. Je me spécialise da...
À propos de ce service

Vous travaillez avec des données géospatiales qui prennent une éternité à traiter ou qui font planter votre machine ?

Je crée des pipelines de données géospatiales propres et fiables, sans passer des heures à déboguer des tuiles raster, gérer des erreurs de mémoire ou des problèmes de format.

Ce que j'apporte :

  • Plus de 3 ans d'expérience dans la création de pipelines de production traitant des dizaines de millions d'enregistrements
  • Traitement optimisé des tuiles raster avec lectures en fenêtres, workflows par morceaux, conversions de formats qui ne plantent pas à 3 heures du matin
  • Expérience avec des jeux de données EO (Copernicus, Sentinel) et des données socio-économiques (US Census, Banque mondiale, Eurostat)
  • Mises en production sur AWS et Snowflake

Avec quoi je peux travailler :

  • Tous formats : GeoTIFF, Shapefile, GeoJSON, CSV, Parquet, flux API
  • Base de données cible, S3, fichiers plats, tableaux de bord

Ce que vous recevrez :

  • Code Python propre et documenté
  • Données validées et transformées, prêtes pour l’analyse
  • Workflows optimisés qui n'utiliseront pas toute votre RAM
  • Transmission claire avec instructions

Remarque : Pas de streaming en temps réel ni d'applications mobiles.

Vous ne savez pas quel package choisir ? Contactez-moi d'abord !

Expertise:

Intégration API

Big data

Validation des données

etl

Technologie:

Amazon Redshift

Apache Spark

Python

SQL

Snowflake

Balises associées