Инжиниринг Данных@rockyourdata
Делюсь новостями из мира аналитики и карьерными советами. 15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG 🛠️ dataengineer.ru | 🏄♂️ Surfalytics.com №5017813306 Реклама: https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Последние посты (60)
- #60949 сент. 2026 г.1 066 views
Будет все больше и больше AI Data Engineers вакансий. А ваше резюме готово? Pet…
Будет все больше и больше AI Data Engineers вакансий. А ваше резюме готово? Pet проекты уже лежат в GitHub? Книжки по основам AI engineering прочитаны?
- #60938 сент. 2026 г.1 737 views
В посте From Data Engineer To ?? Engineer автор затронул тему изменений в дата…
В посте From Data Engineer To ?? Engineer автор затронул тему изменений в дата инжиниринге, связанных с развитием AI. Автор является практикующим инженером, поэтому ему есть, что рассказать. 1.
- #60926 сент. 2026 г.1 449 views
Цены на составляющие улетели в космос. Заказал NX Jetson, за 2600, хотя думал…
Цены на составляющие улетели в космос. Заказал NX Jetson, за 2600, хотя думал он будет стоить долларов 500. Так же смотрим AI сервер для обучения алгоритмов компьютерного зрения, в планах было взять: Threadripper 7960X (24 ядра), 256 GB DDR5 ECC, 2× RTX 5090 32 GB, 10 TB NVMe,…
- #60915 сент. 2026 г.2 061 views
Azure DP 750 или типа того. Для работы нужно было сдать экзамен, пришлось…
Azure DP 750 или типа того. Для работы нужно было сдать экзамен, пришлось попросить «крышевать», как результат 942 из 1000🤴. Все вопросы были про Azure Databricks. Хотите сдать также хорошо экзамен? Есть варианты -> дорого, быстро, надежно😎
- #60903 сент. 2026 г.1 323 views
Diversity для LLMs В одном стартапе, про который я недавно писал, все…
Diversity для LLMs В одном стартапе, про который я недавно писал, все используют Claude Code. Claude Code подключён к MCPs: • dbt Cloud • Snowflake • Omni BI С помощью Claude Desktop и Claude Code любой желающий (с доступом) может писать код, открывать PR.
- #60893 сент. 2026 г.2 807 views
Никогда не думал, что заведём кота. Я себя больше относил к собачникам. Но…
Никогда не думал, что заведём кота. Я себя больше относил к собачникам. Но семья решила по-другому. Возможно, у кота есть немного собачьих привычек — бегать, прыгать, а возможно, он ещё молодой. Назвал я его Claude Кот.
- #60882 сент. 2026 г.2 928 views
Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform…
Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️ На вебинаре 8 сентября эксперты Cloud.ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированных витрин — с помощью…
- #608631 авг. 2026 г.1 536 views
На SmallSat нашел единственную компания, которая создает дата платформа as a…
На SmallSat нашел единственную компания, которая создает дата платформа as a service для телеметрии. То есть ничего принципиально нового, но есть конкретный фокус на AeroSpace и у них уже есть серьезные клиенты.
- #608531 авг. 2026 г.1 956 views
Давно мечтал добавить сайт про музей прадеда, наконец старший сын подрос и…
Давно мечтал добавить сайт про музей прадеда, наконец старший сын подрос и научился пользоваться Claude Code (14 лет) и создал сайт, я по смыслу поправил и показал как подключить домен. Сентябрь 1812 года. Москва оставлена, армия отступает, война выглядит проигранной.
- #608431 авг. 2026 г.3 091 views
Так как тильда у нас умерла для Data Learn, я скопировал сайт на Github pages и…
Так как тильда у нас умерла для Data Learn, я скопировал сайт на Github pages и почистил его. https://datalearn.ru/ Чат в телеграмм теперь должен иметь нового админа с правами на добавление спам ботов. PS 1) хотите быть активном в чате и помогать другим? Welcome.
- #608330 авг. 2026 г.1 127 views
From Vibe Coding to the AI Software Factory - статья Seattle Data Guy, в…
From Vibe Coding to the AI Software Factory - статья Seattle Data Guy, в которой он описывает как инженерные команды эволюционируют в использовании AI и больших языковых моделей для разработки.
- #608229 авг. 2026 г.2 096 views
Можно послушать про dbt онлайн -…
Можно послушать про dbt онлайн - https://www.getdbt.com/dbt-summit/registration/online у них скоро в Вегасе Summit
- #608128 авг. 2026 г.2 056 views
Spark на GPU vs EC2🚀 https://aws.amazon.com/blogs/big-data/gpu-accelerated-apach…
Spark на GPU vs EC2🚀 https://aws.amazon.com/blogs/big-data/gpu-accelerated-apache-spark-with-amazon-emr-and-nvidia-rtx-pro-4500-on-amazon-ec2-g7-instances-runs-up-to-3-7x-faster/
- #608027 авг. 2026 г.1 409 views
Notion решил записать звонок на русском сегодня. Первую фразу он хорошо уловил…
Notion решил записать звонок на русском сегодня. Первую фразу он хорошо уловил - каникулы, дети дома….
- #607927 авг. 2026 г.1 741 views
Pollen Robotics выпустили новинку; У робота Mini Reachy…
Pollen Robotics выпустили новинку; У робота Mini Reachy (https://t.me/rockyourdata/5899) появился младший собрат Micro Duck, c ногами.
- #607827 авг. 2026 г.1 975 views
Сразу 2 документа на похожую тему: • The New SDLC With Vibe Coding by Google •…
Сразу 2 документа на похожую тему: • The New SDLC With Vibe Coding by Google • The AI-Native SDLC playbook by Claude Но чтобы их читать и понимать лучше начать с того, что каждый день использовать агентов в работе (Claude, Cursor и тп)
- #607627 авг. 2026 г.2 861 views
Продолжаю список благодарностей - мне сегодня чувак написал СПАСИБО за…
Продолжаю список благодарностей - мне сегодня чувак написал СПАСИБО за менторство в 2019 году! Это я почитал нашу переписку в LinkedIn. Я его реферил и в Амазон, и в Майкрософт, но не помогало. Они мне записывал года 3. Я его даже не видел.
- #607526 авг. 2026 г.3 248 views
Ещё один success case на Surfalytics. Звучит всё просто и понятно, но это очень…
Ещё один success case на Surfalytics. Звучит всё просто и понятно, но это очень высокий стресс, когда вы теряете работу и у вас нет визы. Поэтому поддержка сообщества — это важно, ну и в целях экономии времени и максимальной отдачи лучше учить то, что нужно.
- #607426 авг. 2026 г.1 866 views
AWS купили DuckLabs. Интересно как это отразиться на продукте. Хотя с другой…
AWS купили DuckLabs. Интересно как это отразиться на продукте. Хотя с другой стороны всем нравится 🦆 , но я никого не знаю, кто их использует серьезно.
- #607326 авг. 2026 г.2 971 views
В Salt Lake City встретился всего лишь с одним подписчиком - Виктором. Виктор…
В Salt Lake City встретился всего лишь с одним подписчиком - Виктором. Виктор рассказал, как работал электриком в маленьком городе в Белоруси и уехала в Польшу еще давно.
- #607225 авг. 2026 г.1 507 views
Как ИИ помогает создавать и сопровождать Spark-задачи в облаке ☁️ На вебинаре…
Как ИИ помогает создавать и сопровождать Spark-задачи в облаке ☁️ На вебинаре 27 августа эксперты Cloud․ru расскажут, как автоматизировать работу с Apache Spark с помощью Evolution Managed Spark c ИИ.
- #607123 авг. 2026 г.965 views
Если кто есть в Salt Lake City, на родине мормонов, дайте знать, отправляюсь на…
Если кто есть в Salt Lake City, на родине мормонов, дайте знать, отправляюсь на конференцию.
- #607021 авг. 2026 г.1 772 views
Оказывается Claude remote часто заблокирован, поэтому если в рабочий день вам…
Оказывается Claude remote часто заблокирован, поэтому если в рабочий день вам нужно быть на природе, Happy Engineering вам в помощь - удаленный терминал в Claude code.
- #606921 авг. 2026 г.2 602 views
Fuckup Night от создателей Trisigma, Ares и karpov.courses Согласитесь, ивенты,…
Fuckup Night от создателей Trisigma, Ares и karpov.courses Согласитесь, ивенты, где все делятся только своими успехами, уже поднадоели. Хочется реальных историй, где что-то пошло не по плану, но в итоге ошибка стала ценным опытом.
- #606820 авг. 2026 г.3 017 views
Ну и чтобы понять как выглядит средний PR от Product Manager кто еще не знал ни…
Ну и чтобы понять как выглядит средний PR от Product Manager кто еще не знал ни dbt, ни snowflake несколько месяцев назад. Это еще цветочки))
- #606720 авг. 2026 г.2 886 views
Каждый раз когде мне прилетает PR, а прилетает много и часто - у меня в голове…
Каждый раз когде мне прилетает PR, а прилетает много и часто - у меня в голове играет эта песня - “постой, паровоз....кондуктор нажми на тормоза” Надо бы им перевести🤬
- #606620 авг. 2026 г.2 941 views
Классно, что есть бесплатные ресурсы, где можно посмотреть как использовать AI…
Классно, что есть бесплатные ресурсы, где можно посмотреть как использовать AI в работе. Даже если это не best practices, все равно можно узнать что-то новое, увидеть новые инструменты. Уверен в AI Dev Tools Zoomcamp: AI-Native Software Engineering можно подчерпнуть знания.
- #606520 авг. 2026 г.3 124 views
Поделюсь наблюдениями за enterprise-компаниями. 1.Большие и скучные enterprise…
Поделюсь наблюдениями за enterprise-компаниями. 1.Большие и скучные enterprise (Finance, Insurance, Government, Health и т.д.) сидят на Microsoft. 2. У них большие команды, которые умеют эффективно посещать митинги, тренинги и кивать головой, когда старший по званию выступает.
- #606419 авг. 2026 г.739 views
В пятницу отправимся в небольшой поход с палатками. Если вы в Ванкувере, можете…
В пятницу отправимся в небольшой поход с палатками. Если вы в Ванкувере, можете присоединиться. Из Deep Cove до Granite Falls (до конца Indian Arm). Пример маршрута с фотками. Возможно уже лосось приплыл и плещется рядом с Indian River, вот и проверим.
- #606219 авг. 2026 г.2 107 views
Поделюсь своими ощущениями по использованию AI агентов. Этап эйфории прошёл.…
Поделюсь своими ощущениями по использованию AI агентов. Этап эйфории прошёл. Немножко поподробней про этот этап. У вас есть Claude Code и больше ни у кого его нет. У вас уже настроены MCP ко всем дата-сервисам и базам, и Claude делает за вас 100% работы.
- #606119 авг. 2026 г.2 940 views
В новой статье Headed for the Exit: the Great Engineering Leader Career Break,…
В новой статье Headed for the Exit: the Great Engineering Leader Career Break, автор делится наблюдениям про высокие инженерные должности. CTO, VP of Engineering, Head of Engineering — люди, которые ещё вчера были на вершине карьеры — сейчас пачками уходят с позиций.
- #605918 авг. 2026 г.1 894 views
Недавно был интересный случай. Моя компания Rock Your Data попала в небольшой…
Недавно был интересный случай. Моя компания Rock Your Data попала в небольшой тендер на разработку хранилища данных. Моим оппонентом была небольшая консалтинговая компания, которая решила предложить стартапу внедрить Microsoft Fabric + Power BI. Это была их фатальная ошибка.
- #605818 авг. 2026 г.3 468 views
Оказывается GitHub переживает тяжелые времена. Я сам замечаю как мои простые…
Оказывается GitHub переживает тяжелые времена. Я сам замечаю как мои простые jobs на расписание работают через раз. Получается для critical pipelines GitHub все хуже. А как у вас?
- #605517 авг. 2026 г.2 530 views
🚀🚀🚀 📅 Сегодня в 19:00 по МСК будет вебинар про то, как агентный AI начинает…
🚀🚀🚀 📅 Сегодня в 19:00 по МСК будет вебинар про то, как агентный AI начинает менять привычный подход к BI и меняет бизнес-аналитику. 🎙 Спикеры: ребята из AI4BI.
- #605413 авг. 2026 г.2 693 views
Наверно посмотрели на SpaceX, OpenAI, Anthropic и решили, что надо побольше…
Наверно посмотрели на SpaceX, OpenAI, Anthropic и решили, что надо побольше капитализацию. А еще databricks купил Electric - агенты рулят!
- #605313 авг. 2026 г.2 994 views
Говорят навык кодить руками уже умирает. Писать код самому это уже недостаток.…
Говорят навык кодить руками уже умирает. Писать код самому это уже недостаток. Понимать код, архитектуру и знать фундаментальные вещи это другое, которое необходимо. И теперь как-то надо это понимать и знать без hands-on опыта. Молодежь, держись ☕️
- #605212 авг. 2026 г.3 349 views
Lakehouse для аналитиков и инженеров данных Приглашаем изучить популярный…
Lakehouse для аналитиков и инженеров данных Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
- #605111 авг. 2026 г.2 106 views
В Lakehouse можно сколько угодно ускорять compute, но если S3 не успевает…
В Lakehouse можно сколько угодно ускорять compute, но если S3 не успевает отдавать данные, вся платформа упрётся в storage. 18 августа на Data Meetup VK Tech будет хороший практический кейс Авито именно про это.
- #605010 авг. 2026 г.3 765 views
Рост зарплат DE в Канаде, да и в мире. Раньше в Канаде средняя вилка была…
Рост зарплат DE в Канаде, да и в мире. Раньше в Канаде средняя вилка была 140-160к, а теперь уже почти все вакансии до 200к (в год gross). И это за старшего инженера. В США будет конечно выше и уже в usd. Как дела с зарплатами в РФ и Европе?
- #604910 авг. 2026 г.2 525 views
Давно не слышал про хороший open source BI Metabase.…
Давно не слышал про хороший open source BI Metabase. https://www.metabase.com/blog/security-update
- #60487 авг. 2026 г.2 022 views
Сегодня заценил новый skill от Claude. Как обычно Airflow Dag упал с ошибкой.…
Сегодня заценил новый skill от Claude. Как обычно Airflow Dag упал с ошибкой. Обычно я копирую ошибку в Claude Code и прошу его починить. Но сегодня товарищ попробовал попросить Claude bot, и он сразу нашел проблему, владельца dag, source code изменения и тп. И сразу сделал PR.
- #60447 авг. 2026 г.2 385 views
Я получил новый MacBook и зарядил Claude Code скачать локальные модели на…
Я получил новый MacBook и зарядил Claude Code скачать локальные модели на попробовать.
- #60437 авг. 2026 г.2 924 views
👀Кто такой по-настоящему крутой дата-инженер сегодня? Профессия дата-инженера…
👀Кто такой по-настоящему крутой дата-инженер сегодня? Профессия дата-инженера сильно изменилась. Еще недавно основной фокус был на надежных пайплайнах, ETL-процессах и стабильной доставке данных.
- #60426 авг. 2026 г.1 449 views
Интересная локальная модель Gemma4-12B-Coder для Python, работает без…
Интересная локальная модель Gemma4-12B-Coder для Python, работает без интернета. Нужно 4.5 Gb VRAM. Если вдруг вопрос про RAM vs VRAM: RAM — рабочий стол обычного офисного работника (CPU) VRAM — рабочий стол дизайнера с огромным монитором (GPU) Пишите много на Python или…
- #60416 авг. 2026 г.2 245 views
Как работать с данными так, чтобы не терять клиентов Данных о клиентах у…
Как работать с данными так, чтобы не терять клиентов Данных о клиентах у крупных компаний не просто много, а очень много. Следующий уровень: связать все эти данные между собой и использовать в бизнес-процессах. Ситуация: клиент решил расстаться с банком.
- #60405 авг. 2026 г.2 012 views
Если смотреть на актуальный стек в Data-инженерии и ML, требования к…
Если смотреть на актуальный стек в Data-инженерии и ML, требования к специалистам уже давно вышли за рамки одной только работы с данными или алгоритмами.
- #60394 авг. 2026 г.216 views
Вход в аналитику сейчас требует большего, чем несколько лет назад. AI закрывает…
Вход в аналитику сейчас требует большего, чем несколько лет назад. AI закрывает часть рутины, но не снимает с аналитика ответственность за корректность выводов.
- #60381 авг. 2026 г.2 210 views
Товарищ скинул видео про Clickhouse и его основателя. Очень интересно и…
Товарищ скинул видео про Clickhouse и его основателя. Очень интересно и познавательно. Как-то я его всего недооценивал на западном рыке. Очень интересный кейс для data observability - миграция c DataDog/Splunk, миграция хранилища данных Databricks/Snowflake на ClickHouse Cloud.
- #603531 июл. 2026 г.695 views
MotherDuck сделали классный сервис для своего демо, который анализирует данные…
MotherDuck сделали классный сервис для своего демо, который анализирует данные с LLM
- #603431 июл. 2026 г.1 181 views
Snowflake показал отчлиные результаты и стоки у них подросли. Без AI конечно не…
Snowflake показал отчлиные результаты и стоки у них подросли. Без AI конечно не обошлось. Для меня Snowflake все еще является лучшей платформой для хранилища данных. Не самой дешевой, но самой простой и понятной. Про Databricks такого сказать не могу.
- #603129 июл. 2026 г.687 views
После мы отправились в Париж. Туда должна была прилететь жена с двумя детьми.…
После мы отправились в Париж. Туда должна была прилететь жена с двумя детьми. По плану у нас было взять машину и поехать по Европе, примерно как прошлым летом, только в другую сторону. Об этом расскажу в следующем посте.
- #601128 июл. 2026 г.2 332 views
В прошлом посту я остановился в Любляне, столице Словении. Дальше у нас по…
В прошлом посту я остановился в Любляне, столице Словении. Дальше у нас по плану начинался вело кемп от компании SportsTravel. Про них я узнал из канала Михаила (со-основателя издательства МИФ).
- #601028 июл. 2026 г.1 476 views
Ох уж эти стендапы с Америкой из Испании… Тут вечер, там утро, вот и…
Ох уж эти стендапы с Америкой из Испании… Тут вечер, там утро, вот и приходиться отвлекаться🤫
- #600923 июл. 2026 г.2 100 views
❤️❤️❤️❤️❤️❤️❤️❤️❤️❤️ Сегодня недостаточно просто использовать LLM — важно…
❤️❤️❤️❤️❤️❤️❤️❤️❤️❤️ Сегодня недостаточно просто использовать LLM — важно понимать, как строить вокруг них полноценные ИИ-системы. Именно этому посвящена Yandex AI Studio Series Summer Edition — событие, которое проходит 16-30.
- #600319 июл. 2026 г.2 262 views
После Лондона мы прилетели в Любляну, и у нас было немного времени погулять в…
После Лондона мы прилетели в Любляну, и у нас было немного времени погулять в этом городе — столице Словении. Красивый европейский город, но маленький. К нам приехали Гриша и Женя из Хорватии, они живут на побережье в Риеке.
- #600217 июл. 2026 г.1 669 views
А в Париже кто живет? Можно завтра data&drinks🥂
А в Париже кто живет? Можно завтра data&drinks🥂
- #59939 июл. 2026 г.2 125 views
Встретились с ребятами из Лондона в пабе, а с Ромой Зыковым на вокзале, я его…
Встретились с ребятами из Лондона в пабе, а с Ромой Зыковым на вокзале, я его проводил до поезда на море))) Очень классно так приехать в другой город и другую страну и узнать кто чем живет, как тут работается, какие цены и перспективы.
- #59928 июл. 2026 г.2 409 views
Запись - https://www.youtube.com/watch?v=CE0K9ErBqsI Презентация в приложении.…
Запись - https://www.youtube.com/watch?v=CE0K9ErBqsI Презентация в приложении. Вроде получилось довольно неплохо, хоть и с небольшими проседаниями, так как давно не делал презентаций на английском.
- #59858 июл. 2026 г.2 894 views
Сегодня в 5:30 встречаемся в Лондоне. PS так не обычно, раньше в школе всегда…
Сегодня в 5:30 встречаемся в Лондоне. PS так не обычно, раньше в школе всегда учил London is the capital of Great Britain, но никогда не был тут.
- #59847 июл. 2026 г.1 799 views
"Как упростить работу с кластером через веб‑интерфейс OpenSearch Dashboards…
"Как упростить работу с кластером через веб‑интерфейс OpenSearch Dashboards Присоединяйтесь к вебинару от Selectel, чтобы разобраться на практике, как развернуть кластер СУБД OpenSearch в облаке за несколько минут и управлять им с помощью веб-интерфейса OpenSearch Dashboards.