Удобный подход к написанию SQL -> Pipe SQL Есть даже white paper на эту тему - SQL Has Problems. We Can Fix Them: Pipe Syntax In SQL от Google Research. Идея очент похожа на написание PySpark, Pandas и другие подходы с использованием dataframes. Все последовательно и лаконично. SQL Pipe есть у DuckDB https://duckdb.org/community_extensions/extensions/psql.html И теперь у Databricks в их свежем релизе.