01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как исполняется код на Spark под капотом и его узкие места 08:45 - Векторизованная модель исполнения кода 10:39 - Comet - движок поверх Dafafusion + Arrow 27:10 - Интеграция Comet - Iceberg 31:36 - Как включить векторизованный движок при чтении Iceberg-Parquet
01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как…
Из этого канала
- #404В коментах вспомнили отличный доклад на Smart Data 2025. Ребята измерили, как…
В коментах вспомнили отличный доклад на Smart Data 2025. Ребята измерили, как на практике работает Comet (Rust), Velox (C++) движки Spark'а.
- #405На тему альтернативных движков Spark - офигенный доклад со Smart Data 2025 от…
На тему альтернативных движков Spark - офигенный доклад со Smart Data 2025 от Евгения Глотова из Navio Видео пока что за пейволом, но слайды (70 слайдов) можно…
- #406Напомню и про свой доклад https://vkvideo.ru/video-164978780456239739 Внутри…
Напомню и про свой доклад https://vkvideo.ru/video-164978780456239739 Внутри прожарка формата Iceberg - как оно устроено и почему именно так.
- #402DataFusion Comet Продолжаем разбор интересных докладов. Сегодня - доклад с…
DataFusion Comet Продолжаем разбор интересных докладов. Сегодня - доклад с Iceberg Summit 2024 про движок Comet от Чао Сана (Chao Sum) Staff Engineer OpenAI…
- #400Хозяйке на заметку. Если нейросеть тупит, просто повторите промпт еще разик
Хозяйке на заметку. Если нейросеть тупит, просто повторите промпт еще разик