J'enseignerai le sujet de l'ingénierie des données pyspark, sql, entrepôt de données

Vous souhaitez apprendre les outils et techniques les plus récents pour le traitement, la gestion et l'architecture des données ? Dans ce cours complet, je vous enseignerai tout ce que vous devez savoir sur les jobs ETL batch/streaming dans le cloud, avec un accent particulier sur AWS et Data bricks. Nous plongerons en profondeur dans le traitement des données avec PySpark, un cadre open-source populaire utilisé dans le cloud. Vous apprendrez également à construire des pipelines de données en utilisant l'architecture Lake House, et comment créer un pipeline de données ELT avec DBT (Data Build Tool).

Mais ce n'est pas tout ! Je vous enseignerai aussi la qualité des données avec Pydeeque, Great Expectation, qui sont des outils puissants de validation des données. La modélisation des données est également un domaine clé, notamment la modélisation dimensionnelle, essentielle pour construire des architectures de données solides. Nous aborderons aussi l'entreposage de données avec des plateformes cloud populaires telles que Snowflake, Big Query et RedShift.

En plus de ces sujets, vous apprendrez également l'orchestration avec Apache Airflow, AWS Step Function, et comment construire des pipelines de données avec AWS Athena, AWS Kinesis, AWS Glue Catalog et AWS DMS. Nous couvrirons aussi le Data Lake avec AWS S3.