__Почему ваша команда дата-инженеров всегда выглядит несчастной и выгоревшей: 1. Они тратят большую часть времени на переработку плохо спроектированных таблиц в SQL 2. На них кричат, когда ломается чужой код 3. Никто не пишет тесты, но все ожидают, что они будут отлаживать сбои 4. Дежурство — это кошмар 5. Качество данных не ценится так, как функции с очевидным ROI 6. Сколько бы времени они ни тратили на сокращение облачных расходов — этого всегда мало 7. Им редко удаётся заниматься инновационной работой 8. Они — одна из наименее публично признаваемых инженерных команд (привет, Безопасность) 9. Это крайне сложная роль для замещения = долгое время с открытыми вакансиями 10. У них маленький бюджет для огромной и дорогостоящей проблемы 11. Они чаще всего первыми получают обвинения и последними — похвалу 12. Количество сервисных тикетов никогда не уменьшается 13. Плохое моделирование данных делает их жизнь радикально сложнее 14. «Больших побед» для празднования значительно меньше 15. Им не хватает контроля для внедрения лучших практик управления данными 16. Управление данными никогда не в приоритете… пока внезапно не становится им 17. Их редко привлекают, когда стартует новый крупный дата-проект… 18. …но в итоге именно им приходится разгребать весь беспорядок 19. Их редко уведомляют об изменениях в upstream-системах, вызывающих сбои пайплайнов 20. Никаких контрактов с поставщиками данных!__
Почему ваша команда дата-инженеров всегда выглядит несчастной и выгоревшей: 1.…
Из этого канала
- #5925Наш любимый dbt стал еще лучше - встречайте dbt core v2 • dbt Core v2.0 — это…
Наш любимый dbt стал еще лучше - встречайте dbt core v2 • dbt Core v2.0 — это новая open-source (Apache 2.0) основа, которая теперь написана на Rust вместо…
- #5926В наше время самый кайф это попасть в зону, где нет сети. Следующие 5 дней буду…
В наше время самый кайф это попасть в зону, где нет сети. Следующие 5 дней буду плавать на paddle board в тихом океане и ничего делать🏄♂️
- #5923Сегодня был еще один собес. На входе 5 лет опыта. Задачка такая же - платформа…
Сегодня был еще один собес. На входе 5 лет опыта. Задачка такая же - платформа на AWS. Кандидат прыгал с Postgres на Snowflake и Databricks.
- #5921Сегодня проводил собес по system design DE. У Кандидата было резюме на 10…
Сегодня проводил собес по system design DE. У Кандидата было резюме на 10 страниц текста! Сами понимаете серьезный кандидат. Я приложил задачку и результат.
- #5919"Послушал подкаст Data Engineering Central - там разговор с Джейкобом Мэтсоном,…
"Послушал подкаст Data Engineering Central - там разговор с Джейкобом Мэтсоном, Developer Advocate из MotherDuck (это облачная версия DuckDB). 1.