Архитектор Данных@analyticsfromzero
Алексей, архитектор данных из ВК. Большие данные и облака. Для связи @alexbelozersky
Последние посты (60)
- #7688 сент. 2026 г.372 views
Моя топовая история починки чего-либо тянулась нон-стоп 32 часа. Это был…
Моя топовая история починки чего-либо тянулась нон-стоп 32 часа. Это был Greenplum заказчика, который несколькими последовательными командами gprecoverseg вывели в «нештатный» режим. Ночная смена под жестким sla плюс неудачное стечение обстоятельств.
- #7657 сент. 2026 г.416 views
Насколько же правы оказались те, кто голосовали за Термояд. В нем, родимом…
Насколько же правы оказались те, кто голосовали за Термояд. В нем, родимом проблема, а не в моделях и даже не в видеокартах. Точнее в розетке. Причем, это раньше было экономически непонятно, зачем нам 50-100 ГВт дополнительной энергии в одной точке.
- #7647 сент. 2026 г.431 views
"Прогноз потребления ЦОДов по миру. Российская энергосистема это порядка 1.2…
"Прогноз потребления ЦОДов по миру. Российская энергосистема это порядка 1.2 ТераВатт-часов в год. График подрезал из большой статьи коллег про ситуацию с энергетикой ЦОД.
- #7634 сент. 2026 г.473 views
Больше всего удивляют люди, которые в жизни общаются языком корпоративных…
Больше всего удивляют люди, которые в жизни общаются языком корпоративных писем. «В рамках», «привлечь», «проработать задачу», «выстроить процессы». Камераден, нас никто не видит, объясни нормально, что ты хочешь. И вообще мы в баре, работа кончилась час назад.
- #7623 сент. 2026 г.383 views
Все дата инженерные проблемы обычно решаются дополнительным тестированием…
Все дата инженерные проблемы обычно решаются дополнительным тестированием данных Кроме одной - избыточного тестирования данных
- #7613 сент. 2026 г.406 views
Дайджест статей 📰 Beyond the Dashboard (Booking.com) 🔗…
Дайджест статей 📰 Beyond the Dashboard (Booking.com) 🔗 https://medium.com/booking-com-development/beyond-the-dashboard-accelerating-real-time-intelligence-in-the-age-of-ai-6f1f0f9c123f 💡 «Talk to your data» переносит узкое место с дашбордов на семантический слой: определения под…
- #7602 сент. 2026 г.274 views
Посмотрите видео чтобы почувствовать атмосферу типичного технического пресейла
Посмотрите видео чтобы почувствовать атмосферу типичного технического пресейла
- #7592 сент. 2026 г.498 views
Новости бигдаты Пишут, что бигдата добралась до курочек. Теперь всех…
Новости бигдаты Пишут, что бигдата добралась до курочек. Теперь всех пересчитают и всех каталогизируют. Кроликов и пчел год назад уже пересчитали Еще сегодня Перекресток меня попросил пачку чипсов через Честный знак прокатить.
- #75729 авг. 2026 г.333 views
Двух рабочих на стройке спросили: Что ты делаешь? Один ответил: Таскаю бревна,…
Двух рабочих на стройке спросили: Что ты делаешь? Один ответил: Таскаю бревна, укладываю кирпичи. Другой сказал: Я строю храм. ————————————————— Каков он, Храм, который ты строишь?
- #75628 авг. 2026 г.368 views
Упоминаемый движок Apache Comet дорос до версии 1.0.0 Что он делает - меняет…
Упоминаемый движок Apache Comet дорос до версии 1.0.0 Что он делает - меняет среду исполнения внутри Spark с JVM на Rust без переделки прикладного кода джобов https://datafusion.apache.org/blog/output/2026/08/07/datafusion-comet-1.0.0/
- #75528 авг. 2026 г.360 views
01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как…
01:15 - Улучшаем производительность нативного движка Spark 05:10 - Как исполняется код на Spark под капотом и его узкие места 08:45 - Векторизованная модель исполнения кода 10:39 - Comet - движок поверх Dafafusion + Arrow 27:10 - Интеграция Comet - Iceberg 31:36 - Как включить…
- #75428 авг. 2026 г.508 views
Об этапах собеса В процессе рекрутмента большой компании обязательно должен…
Об этапах собеса В процессе рекрутмента большой компании обязательно должен быть какой-нибудь кринж этап. Пусть кандидата на инженера данных собесит мобильный разработчик. И качает головой на незнание дата инженером архитектуры мобильного фронта и его фреймворков.
- #75327 авг. 2026 г.429 views
Когда нанимаешься руководителем в большую сформированную команду - это как…
Когда нанимаешься руководителем в большую сформированную команду - это как садиться доигрывать шахматную партию за кем-то другим. Приходится угадывать, почему фигуры стоят вот так и в чем был замысел. Насколько этот замысел хорош и стоит ли его развивать.
- #75226 авг. 2026 г.474 views
Молния! Амазон купили DuckDB
Молния! Амазон купили DuckDB
- #75126 авг. 2026 г.525 views
В Airflow теперь можно запустить java-scala приложения нативно Например -…
В Airflow теперь можно запустить java-scala приложения нативно Например - скрипты поддержки Iceberg таблиц, так как много функционала нет в pyiceberg.
- #75026 авг. 2026 г.497 views
"Apache Airflow 3.3.0: Stateful Tasks and Multi-Language Support В Airflow 3.3…
"Apache Airflow 3.3.0: Stateful Tasks and Multi-Language Support В Airflow 3.3 появился AIP-108 — Language Task SDK. Теперь отдельные tasks можно реализовывать на Java или Go, при этом сам DAG и scheduling остаются в Python.
- #74926 авг. 2026 г.551 views
В опросе забыл самую главную опцию: «Клодик, посчитай мне сумму… ну вопщем…
В опросе забыл самую главную опцию: «Клодик, посчитай мне сумму… ну вопщем что-нибудь там посчитай. Чтоб по красоте было»
- #74826 авг. 2026 г.552 views
Забыли подвести итоги по статистике подписчиков канала. Почти 60% SQL-исты…
Забыли подвести итоги по статистике подписчиков канала. Почти 60% SQL-исты разных видов. Привет вам! Датасаенс с пандасом - ок. 10% 12% суровых спарковиков.
- #74725 авг. 2026 г.414 views
Видео пока на монтаже )
Видео пока на монтаже )
- #74625 авг. 2026 г.421 views
Презентация доклада Алмаза.
Презентация доклада Алмаза.
- #74525 авг. 2026 г.420 views
Сейчас все силы вложены в запуск 4-го потока курса по Лейкхаусу Еще больше…
Сейчас все силы вложены в запуск 4-го потока курса по Лейкхаусу Еще больше информации и опыта внедрения/миграции на стек DLH Что разберем: - Как работает форматы Iceberg, Paimon и чем это лучше чем раскладка паркетов по папочкам (спойлер: сильно лучше) - Какими инструментами…
- #74423 авг. 2026 г.458 views
Ничего не могу с собой поделать, и снова вспоминаю самый известный пример…
Ничего не могу с собой поделать, и снова вспоминаю самый известный пример поэтического промпт-инжиниринга. (М.Круг «Кольщик) —— Квенчик, нарисуй мне океан. На опен-джиэле да си-шарпчике. ….. Если РАМа хватит, нарисуй Лодку с парусами, ветром полными
- #74323 авг. 2026 г.460 views
О важности Харнесов. Фрагмент переписки на реддите. Все носятся с Qwen 3.8…
О важности Харнесов. Фрагмент переписки на реддите. Все носятся с Qwen 3.8 семейством и спорят, дотягивает ли он до Claude Opus. И в ходе многочисленных тестов из под кучи мусора появляется бриллиант. Задача - нарисовать реалистичный рендер океана на OpenGL.
- #74223 авг. 2026 г.478 views
Никак не могу понять загадку Откуда в нашей компании такой пик потребления…
Никак не могу понять загадку Откуда в нашей компании такой пик потребления канцоваров в конце августа и начале сентября. Но когда-нибудь я разгадаю эту тайну (С) руководитель отдела закупок - с недобрым блеском в глазах 😈
- #74122 авг. 2026 г.347 views
Энтерпрайз архитектура Сцена в опенспейс, действующие лица: Арх и СТО.…
Энтерпрайз архитектура Сцена в опенспейс, действующие лица: Арх и СТО. ————————————————— - Ситио Айтишевич, почему вы ходите без штанов? - Так исторически сложилось! - Наденьте штаны, пожалуйста.
- #74021 авг. 2026 г.382 views
Архитектор, personal log Пока на моем винте ждал момента офигенный 4-часовой…
Архитектор, personal log Пока на моем винте ждал момента офигенный 4-часовой гайд по агентам, который мне нужно разобрать, дипсик выпустил свой Harness. И все, гайд можно не смотреть, он устарел. Сэкономил себе время получается 😄
- #73920 авг. 2026 г.522 views
Reminder! Сегодня делаем обзор миграции КХД на Лейкхаус! 18:30 сегодня.…
Reminder! Сегодня делаем обзор миграции КХД на Лейкхаус! 18:30 сегодня. Получить ссылку можно в боте https://t.me/devhandsmeetupbot
- #73718 авг. 2026 г.371 views
На что только не пойдешь, чтобы получить хорошо работающий ОнПрем S3 под свой…
На что только не пойдешь, чтобы получить хорошо работающий ОнПрем S3 под свой DLH
- #73518 авг. 2026 г.499 views
Не знаю, как подсчитали, но цифра интересная. Ну и еще раз - годовые инвестиции…
Не знаю, как подсчитали, но цифра интересная. Ну и еще раз - годовые инвестиции каждой из упомянутых компаний больше чем потрачено за всю историю российского ИТ. И это создает огромный финансовый стресс даже для грандов рынка.
- #73417 авг. 2026 г.554 views
Возвращаемся к видео-формату! В этот четверг в 18:30 обсуждаем кейс переезда с…
Возвращаемся к видео-формату! В этот четверг в 18:30 обсуждаем кейс переезда с Greenplum на Lakehouse с Алмазом Хайфуллиным из SkillBox! С командой SkillBox я работал около 2 лет по линии ВК-Теха. Мы начали с эвакуации данных из одного из западных облаков в домашний контур.
- #73317 авг. 2026 г.556 views
meat-proxy — человек который отправляет ответ ИИ вместо своей точки зрения не…
meat-proxy — человек который отправляет ответ ИИ вместо своей точки зрения не будьте meat-proxy 😏 @tipsai
- #73215 авг. 2026 г.329 views
Вдруг понял, что за последние 10 лет ни разу не пользовался колесиком мыши.
Вдруг понял, что за последние 10 лет ни разу не пользовался колесиком мыши.
- #73114 авг. 2026 г.192 views
Объясните кто-то, почему метро в Петербурге дороже чем в Москве
Объясните кто-то, почему метро в Петербурге дороже чем в Москве
- #73012 авг. 2026 г.522 views
Раз - и ты император данных!
Раз - и ты император данных!
- #72911 авг. 2026 г.373 views
На лето 2026 облачные технологии остаются непонятыми для российского ИТ Со…
На лето 2026 облачные технологии остаются непонятыми для российского ИТ Со стороны выглядит как если бы получив в руки электропилу, люди берут ее по двое и водят взад-вперед. Потом жалуются что плохо пилит.
- #72810 авг. 2026 г.384 views
Во вторник 18 августа буду на митапе от ВК Теха в башнях на Ленинградском…
Во вторник 18 августа буду на митапе от ВК Теха в башнях на Ленинградском проспекте. Из интересного - как в Авито сделали 60 Гбайт/сек под даталейком и почему в Wildberiies приняли решение в пользу лейка на Trino + DataFusion Ну и если кому-то интересен я - можем там…
- #72710 авг. 2026 г.444 views
#НовостиКиберпанка На секунду, ИИ-судья разборщик жалоб и мелкой бытовухи это…
#НовостиКиберпанка На секунду, ИИ-судья разборщик жалоб и мелкой бытовухи это необходимое изделие в современном государстве. Иначе паралич системы.
- #7269 авг. 2026 г.329 views
Пока в иных компаниях мучительно запрягают на тему стека данных Наша госуха и…
Пока в иных компаниях мучительно запрягают на тему стека данных Наша госуха и даже более того, военка сделали себе вполне дата лейк с бигдатой и датадривеном. Те самые лампасы, над которыми принято потешаться.
- #7257 авг. 2026 г.319 views
Если кому интересно, чем я сейчас занимаюсь, то вот это оно.
Если кому интересно, чем я сейчас занимаюсь, то вот это оно.
- #7247 авг. 2026 г.429 views
Надо сказать, что безумные ИИ капексы, размером многократно большим, чем все…
Надо сказать, что безумные ИИ капексы, размером многократно большим, чем все деньги потраченные на всё российское ИТ за всю его историю - это огромный стресс даже для грандов американского рынка.
- #7237 авг. 2026 г.404 views
Носим в кармане батарейку чтобы заряжать телефона батарейку Строим на станции…
Носим в кармане батарейку чтобы заряжать телефона батарейку Строим на станции батарейку, чтобы заряжать авто батарейку Новости киберпанка
- #7217 авг. 2026 г.452 views
BYD официально показала самую быструю в мире зарядку электромобилей: 10-97% за…
BYD официально показала самую быструю в мире зарядку электромобилей: 10-97% за 9 минут. Технология Flash Charging 2.0 работает с аккумуляторами Blade Battery 2.0 - до 70%, батарею авто можно зарядить за 5 минут.
- #7207 авг. 2026 г.553 views
Хорошая карта современных опенсорсных инструментов для работы с данными
Хорошая карта современных опенсорсных инструментов для работы с данными
- #7196 авг. 2026 г.353 views
А вот от таких вариантов становится жутко. Надеюсь очень, что подписчик пошутил
А вот от таких вариантов становится жутко. Надеюсь очень, что подписчик пошутил
- #7166 авг. 2026 г.555 views
"Цифры от которых бывает печально смотрю на отчеты топ облачных компаний. За 2…
"Цифры от которых бывает печально смотрю на отчеты топ облачных компаний. За 2 квартал. Azure - $100+ млрд/год. Рост +43% год-к-году. AWS - $168 млрд/год ($42 млрд/квартал). Рост +27% год-к-году. Для сравнения - топ облако в России - Яндекс Клауд показал $0.3 млрд в год.
- #7145 авг. 2026 г.511 views
"Кликхаус знают все инженеры мира. От России через Европу до США, Китая и…
"Кликхаус знают все инженеры мира. От России через Европу до США, Китая и Индии. С такими знаниями точно не пропадешь. Недавно мы с коллегами сделали небольшой курс из 6 лекций с кучей практики на датасетах из 5+ миллиардов строк.
- #7135 авг. 2026 г.493 views
"Посмотрел интервью Алексея Миловидова, создателя Clickhouse Инсайты одной…
"Посмотрел интервью Алексея Миловидова, создателя Clickhouse Инсайты одной строкой Продолжая тему рукопожатности. В борде Clickhouse Inc Алексей практически единственный русскоязычный владелец. Там полный набор фондов долины и их представителей.
- #7103 авг. 2026 г.717 views
Вышла новость, что Andy Pavlo приняли на борт Clickhouse Inc. Энди довольно…
Вышла новость, что Andy Pavlo приняли на борт Clickhouse Inc. Энди довольно известная фигура в академической части баз данных. Многолетний заслуженный профессор и автор курсов. Одних это сделает более рукопожатными в мире больших денег и больших технологий.
- #7093 авг. 2026 г.485 views
AI Engine Optimization В нашем небольшом по трафику B2B-шном продукте я нахожу…
AI Engine Optimization В нашем небольшом по трафику B2B-шном продукте я нахожу сотни новых регистраций с referer = [chatgpt, deepseek, gigachat] Оптимизация информации на вашей платформе тем образом чтобы вас чаще рекомендовали по релевантным промптам уже стоит десятки миллионов…
- #70830 июл. 2026 г.487 views
О хобби Есть ли у вас такое дело, ради которого вы готовы вечером отложить…
О хобби Есть ли у вас такое дело, ради которого вы готовы вечером отложить ТикТок (рилсы, шортсы, клипсы)? Есть?
- #70728 июл. 2026 г.527 views
Когда ты аналитик и от тебя хотят приносить больше инсайтов Глупцы, вы не…
Когда ты аналитик и от тебя хотят приносить больше инсайтов Глупцы, вы не понимаете, чего вы просите!
- #70627 июл. 2026 г.641 views
Самая крутая клиентская аналитика у скамеров и инфоцыган. Никто другой не знает…
Самая крутая клиентская аналитика у скамеров и инфоцыган. Никто другой не знает столько о своей клиентской базе. Ни у кого другого нет таких вылизанных и эффективных скриптов. Никто не исполняет на таком техническом уровне в процессе.
- #70527 июл. 2026 г.669 views
Поступила очень проработанная разводка. Повод - камеральная проверка от ФНС.…
Поступила очень проработанная разводка. Повод - камеральная проверка от ФНС. Подозревают меня в том что денежки скрываю ) Записали меня на прием к инспектору. Создали электронную заявку.
- #70425 июл. 2026 г.440 views
Оказывается, выходит на Apple TV в январе 27-го года. Я и не знал, совпало.
Оказывается, выходит на Apple TV в январе 27-го года. Я и не знал, совпало.
- #70325 июл. 2026 г.358 views
Экономика ИИ Дано. Раньше рекламный ролик Добрый колы стоил в продакшене 5 млн.…
Экономика ИИ Дано. Раньше рекламный ролик Добрый колы стоил в продакшене 5 млн. Реальная команда, актеры, операторы, площадка и куча дорогого оборудования.
- #70224 июл. 2026 г.355 views
Хорошо что не проспойлерил (А залил спойлеры в трэш-канал)
Хорошо что не проспойлерил (А залил спойлеры в трэш-канал)
- #70124 июл. 2026 г.609 views
В мире нейросетей и вайбкодинга сениор и джун делают одно и то же. Визуально и…
В мире нейросетей и вайбкодинга сениор и джун делают одно и то же. Визуально и функционально отличий нет. Только джун с надежностью 0.7, а сениор с надежностью 0.99 В этом разница.
- #70023 июл. 2026 г.402 views
Вильяма нашего Гибсона
Вильяма нашего Гибсона
- #69923 июл. 2026 г.430 views
Я бы вспомнил сюжет Нейроманта по следам этой истории с побегом ChatGPT, но…
Я бы вспомнил сюжет Нейроманта по следам этой истории с побегом ChatGPT, но тогда это будут совершенно ядерные спойлеры. А вдруг кто не читал!
- #69822 июл. 2026 г.580 views
Где-то рядом с культом железки у нас живет культ героя. Давайте представим 2…
Где-то рядом с культом железки у нас живет культ героя. Давайте представим 2 команды. Команда А. 1-2 года делала качественный продукт. Он просто выкатывается в любого заказчика, без проблем интегрируется со всем что надо и дальше работает без косяков. Команда Хэ.