Буду вести здесь дайджест новостей, событий и просто обсуждений по Snowflake. Уж больно активно эта платформа развивается. Если есть что сказать по сабжу, -- милости прошу.
Позже планирую создать аналогичный раздел по Databricks.

Итак, как уже было отмечено в соседней теме про Teradata, в Snowflake можно деплоить полноценные жава программы (посредством .jar), разработанные локально c unit-тестами и т.п. Затем можно использовать эту функциональность для создания своих User Defined Functions (UDF), которые, в свою очередь, можно вызывать в Snowflake напрямую из SQL.

Например, создадим простую UDF на базе jar-файла:Теперь можно вызвать её как обычную функцию в SQL:Также можно использовать джарники для пайплайнов в SnowPark, но про SnowPark я сделаю отдельный пост.

Если по какой-либо причине вы не пишите на JVM-языках, а используете Python, то ваши кастомные Python пакеты пакуются в .zip и отправляются в Snowflake, где могут быть использованы либо при создании User Defined Functions/Procedures для вызова из SQL, либо импортрироваться в Snowpark код как обычно через import my_package.

https://medium.com/snowflake/using-other-python-packages-in-snowpark-a6fd75e4b23a

Что только нам не обещали с появлением Big Data. Мы будем прогнозировать продуктовый спрос и вспышки болезни, научим нейросети рисовать картины и сочинять романы, от которых плакал бы сам Достоевский (воссозданный теми же нейросетями по дневникам, портретам и рассказам современников). Что-то из этого уже в каком-то виде увидело свет — и это круто. Но большинству компаний это неинтересно и не нужно. Вместо суперсовременной архитектуры с плюшками-свистелками мы ищем сермяжные аналоги наших старых хранилищ, но быстрее, дешевле и полегче в настройке. И это наглядно видно на примере кейсов Databricks и Snowflake.

Продолжение здесь