01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как исполняется код на Spark под капотом и его узкие места 08:45 - Векторизованная модель исполнения кода 10:39 - Comet - движок поверх Dafafusion + Arrow 27:10 - Интеграция Comet - Iceberg 31:36 - Как включить векторизованный движок при чтении Iceberg-Parquet
01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как…
Из этого канала
- #756Упоминаемый движок Apache Comet дорос до версии 1.0.0 Что он делает - меняет…
Упоминаемый движок Apache Comet дорос до версии 1.0.0 Что он делает - меняет среду исполнения внутри Spark с JVM на Rust без переделки прикладного кода джобов…
- #754Об этапах собеса В процессе рекрутмента большой компании обязательно должен…
Об этапах собеса В процессе рекрутмента большой компании обязательно должен быть какой-нибудь кринж этап.
- #753Когда нанимаешься руководителем в большую сформированную команду - это как…
Когда нанимаешься руководителем в большую сформированную команду - это как садиться доигрывать шахматную партию за кем-то другим.
- #752Молния! Амазон купили DuckDB
Молния! Амазон купили DuckDB