"Разговоры на Архитекторском - Выпуск 5 с Алмазом Хайфуллиным Тема: опыт переезда КХД с Greenplum на Data Lakehouse В августе мы с Алмазом записали отличный стрим про опыт переезда команды Скилбокс на Lakehouse (Trino-Iceberg-S3). Наконец, выкладываю запись. Во время стрима у нас случилась накладка, и облачная запись Zoom приказала долго жить. Поэтому первая треть записи теперь в формате листинга слайдов. Оставим этот момент как эксклюзив для тех, кто был на стриме воочию - чем-то же надо их наградить! Как мне кажется, полезной информации в видео очень много. Не буду совсем уж спойлерить, но вот некоторые темы 1️⃣ Как организовать сырой слой данных так, чтобы не бояться миграций. И не бояться выключать старое КХД, когда миграция подходит к концу. 2️⃣ Как быстро подцеплять новые данных в паркетах под формат Iceberg с использование нескольких разных мета-каталогов 3️⃣ Какие операторы для Airflow написать для облегчения процесса работы с Lakehouse. Ни и вишенка на торте - реальная экономика нового КХД в сравнении с Greenplum! Как уже начать смотреть на разных платформах Ссылки: ВК Видео - https://vkvideo.ru/video-228742675_456239043 ЮТ - https://www.youtube.com/watch?v=ROuJc3PTH6Y Также рекомендую посмотреть другие видео плейлиста ""Разговоры на архитекторском"". Мы с гостями старались! https://vkvideo.ru/playlist/-228742675_6 Подпишитесь на все каналы (если еще нет) 📱 Телеграм 📱 ВК Видео 📱 Youtube"
"Разговоры на Архитекторском - Выпуск 5 с Алмазом Хайфуллиным Тема: опыт…
Из этого канала
- #799О настоящей цене Селф-Сервис Аналитики У народа нет хлеба? Пусть едят пирожные!…
О настоящей цене Селф-Сервис Аналитики У народа нет хлеба? Пусть едят пирожные! Не хватает аналитиков для того чтобы разобрать все задачи от бизнеса? Внедряйте…
- #809О настоящей цене Селф-Сервис Аналитики У народа нет хлеба? Пусть едят пирожные!…
О настоящей цене Селф-Сервис Аналитики У народа нет хлеба? Пусть едят пирожные! Не хватает аналитиков для того чтобы разобрать все задачи от бизнеса? Внедряйте…
- #811Пока накапливается все больше докладов и проектов с миграцией с гринплама на…
Пока накапливается все больше докладов и проектов с миграцией с гринплама на ДЛХ (Скиллбокс, Лемана, ВБ и другие), ребята мужественно обновляют ГП до хотя бы…
- #797Ода эффективным менеджерам «Это мне ИИшка посчитала, я не знаю, как и почему»…
Ода эффективным менеджерам «Это мне ИИшка посчитала, я не знаю, как и почему» От создателей: «Этот слайд мне аналитик прислал, у него и спрашивайте»
- #796На инфографике вы, дорогие коллеги, можете увидеть наше светлое будущее. График…
На инфографике вы, дорогие коллеги, можете увидеть наше светлое будущее. График составлен (через Off The Charts от The Economist) на базе скандального свежего…