Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️
На вебинаре 8 сентября эксперты Cloud.ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированных витрин — с помощью управляемых сервисов, без эксплуатационной нагрузки и с фокусом на бизнес-результат.
В программе:
▶️принципы построения Lakehouse-архитектуры с единым слоем хранения в S3 в формате Apache Iceberg с поддержкой ACID-гарантий и версионирования;
▶️подходы к централизованному управлению метаданными и происхождением данных через Managed Metastore;
▶️способы реализации контроля качества данных в Managed Spark без остановки пайплайнов;
▶️методы организации хранения данных с разным уровнем доверия: партиционирование по качеству, time travel и разделение слоев хранения;
▶️принципы настройки единого SQL-слоя через Managed Trino с разграничением доступа;
▶️инструменты автоматизации оркестрации и мониторинга пайплайнов в Managed Airflow;
▶️возможности визуализации качества и происхождения данных в Managed BI.
➡️ Регистрация — по ссылке
На вебинаре 8 сентября эксперты Cloud.ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированных витрин — с помощью управляемых сервисов, без эксплуатационной нагрузки и с фокусом на бизнес-результат.
В программе:
▶️принципы построения Lakehouse-архитектуры с единым слоем хранения в S3 в формате Apache Iceberg с поддержкой ACID-гарантий и версионирования;
▶️подходы к централизованному управлению метаданными и происхождением данных через Managed Metastore;
▶️способы реализации контроля качества данных в Managed Spark без остановки пайплайнов;
▶️методы организации хранения данных с разным уровнем доверия: партиционирование по качеству, time travel и разделение слоев хранения;
▶️принципы настройки единого SQL-слоя через Managed Trino с разграничением доступа;
▶️инструменты автоматизации оркестрации и мониторинга пайплайнов в Managed Airflow;
▶️возможности визуализации качества и происхождения данных в Managed BI.
➡️ Регистрация — по ссылке