В Airflow теперь можно запустить java-scala приложения нативно Например - скрипты поддержки Iceberg таблиц, так как много функционала нет в pyiceberg. При этом эта ява сможет пользоваться xcom, кредовым волтом, правильно ретраиться и по всем параметрам будет полноценной аэрфлошной джобой а не БашОператором, о котором движок АФ ничего не знает.
В Airflow теперь можно запустить java-scala приложения нативно Например -…
Из этого канала
- #752Молния! Амазон купили DuckDB
Молния! Амазон купили DuckDB
- #750"Apache Airflow 3.3.0: Stateful Tasks and Multi-Language Support В Airflow 3.3…
"Apache Airflow 3.3.0: Stateful Tasks and Multi-Language Support В Airflow 3.3 появился AIP-108 — Language Task SDK.
- #749В опросе забыл самую главную опцию: «Клодик, посчитай мне сумму… ну вопщем…
В опросе забыл самую главную опцию: «Клодик, посчитай мне сумму… ну вопщем что-нибудь там посчитай. Чтоб по красоте было»
- #748Забыли подвести итоги по статистике подписчиков канала. Почти 60% SQL-исты…
Забыли подвести итоги по статистике подписчиков канала. Почти 60% SQL-исты разных видов. Привет вам! Датасаенс с пандасом - ок. 10% 12% суровых спарковиков.