Строим Lakehouse, а сторадж строит нам проблемы…
Продолжаем рассказывать про процесс миграции нашей аналитической платформы из классического DWH в Lakehouse. Про предпосылки и первые шаги читаем тут, а про вынужденную экосистему вокруг Trino — тут.
В этот раз в статье Дмитрий Листвин рассказал про опыт построения Lakehouse поверх объектного хранилища. Читаем, чтобы узнать, как:
1️⃣ Измерить «здоровье» S3-хранилища;
2️⃣ Извлечь максимум производительности из Ceph;
3️⃣ Не наступить на грабли команды нашей аналитической платформы.
#analytics
Продолжаем рассказывать про процесс миграции нашей аналитической платформы из классического DWH в Lakehouse. Про предпосылки и первые шаги читаем тут, а про вынужденную экосистему вокруг Trino — тут.
В этот раз в статье Дмитрий Листвин рассказал про опыт построения Lakehouse поверх объектного хранилища. Читаем, чтобы узнать, как:
1️⃣ Измерить «здоровье» S3-хранилища;
2️⃣ Извлечь максимум производительности из Ceph;
3️⃣ Не наступить на грабли команды нашей аналитической платформы.
❗️ Будет полезно даже тем, кто не работает с Ceph — большинство описанных проблем и решений одинаково актуальны для любого объектного хранилища.
#analytics