Публикации по теме 'snowpark'
Выполнение распределенных прогнозов в масштабе с помощью Snowpark на моделях PySpark с использованием ONNX
Постановка задачи
Snowpark for Python , невероятно экономичная библиотека Python с открытым исходным кодом ( pip | conda ), созданная Snowflake, позволяет клиентам Snowflake внедрять простые в архитектуре конвейеры обработки данных и обработки данных в управляемом облаке Snowflake. Snowpark для Python устраняет необходимость в управлении кластерами, их оптимизации или устранении неполадок для обработки огромных объемов данных и позволяет клиентам сосредоточиться на своих конвейерах,..
Как написать загрузчик для Snowpack
Зима близко…
Snowpack — новая крутая альтернатива webpack. Он быстро стал популярным, и я влюбился в этот инструмент построения интерфейса, как только начал с ним работать. Однако в настоящее время доступно меньше плагинов, чем я использовал при использовании Webpack. Иногда это ослабляло мою мотивацию. К счастью, создать собственный погрузчик для снежного покрова несложно. В этой статье мы…
Обучайте модели машинного обучения с помощью dbt и Snowpark
В своей предыдущей статье я писал о разработке функций машинного обучения с использованием dbt и Snowpark.
https://medium.com/@kakatur/feature-engineering-using-dbt-fed6c7d16460
В этой статье мы используем ту же платформу для разработки моделей машинного обучения и их развертывания в Snowflake.
Код сегодняшней статьи находится на GitHub по адресу
https://github.com/kakatur/fraud-detection-using-dbt-and-snowpark/blob/main/models/ml/fraud/swipe_fraud_alerts.py
Ниже я..
Обработка естественного языка (NLP) и ML в 100% Snowflake с использованием Snowpark Python и Streamlit
Мнения, выраженные в этом посте, являются исключительно моими собственными и не отражают точку зрения или мнение моего работодателя.
Сноупарк для Python
Snowpark — это новая среда разработки для Snowflake. Это позволяет специалистам по данным программировать привычным для них способом на своем любимом языке, а также быстрее и безопаснее выполнять конвейер, рабочий процесс машинного обучения и приложения для работы с данными на единой платформе.
Snowpark передает все свои..
Использование AzureML со Snowflake Snowpark для машинного обучения
В области науки о данных и машинного обучения Python стал предпочтительным языком. Snowflake уже давно поддерживает Python через свой Python Connector, что позволяет специалистам по данным взаимодействовать с данными, хранящимися в Snowflake, из предпочитаемой ими среды Python. Однако этот подход часто включал в себя написание подробных SQL-запросов. Чтобы решить эту проблему, Snowflake представила Snowpark Python, собственный интерфейс Python, который предоставляет более выразительный и..
Введение в Snowpark Python
Snowpark — это среда разработки, которая позволяет разработчикам взаимодействовать с облаком данных Snowflake, используя различные языки, отличные от SQL, такие как Python, Java и Scala.
Таким образом, вместо того, чтобы писать select * from marts.user.dim_user , вы можете написать это:
import snowflake.snowpark as snowpark
def main(session: snowpark.Session):
df = session.table("marts.user.dim_user")
return df
(Примечание: приведенный выше код можно написать и на..
Начало работы с Data Engineering и ML с использованием Snowpark для Python
БОНУС: в нем есть код для создания приложения Streamlit поверх вашей модели машинного обучения.
Здесь нет недостатка в отличном содержании руководств Medium и QuickStart, которые охватывают различные аспекты работы со Snowpark для Python, предоставленные Snowflakes, а также (Snowflake) Data Superheroes . ( Узнайте, как стать дата-супергероем! )
В этом новом техническом руководстве, которое я недавно опубликовал, рассказывается о том, как как можно быстрее запачкать руки, чтобы..
