Hugging Face и SkyPilot: нулевой egress для AI-нагрузок на любом облаке

Hugging Face анонсировал интеграцию с SkyPilot — open-source фреймворком для запуска AI-нагрузок на любых облаках (AWS, GCP, Azure, OCI и т.д.). Ключевая фишка: zero-egress storage. То есть данные (датасеты, модели, артефакты) хранятся на Hugging Face, а вычисления идут на сторонних облачных инстансах — причём плата за выгрузку данных из Hugging Face в облако отсутствует.

Раньше разработчикам приходилось либо дублировать данные между хранилищем Hugging Face и облачным провайдером, либо платить за egress при передаче в другое облако. Теперь SkyPilot автоматически монтирует Hugging Face как хранилище для любого облачного инстанса — без дополнительных затрат на transfer.

Для пользователей это означает гибкость: можно выбирать облако с самыми дешёвыми GPU (например, Spot-инстансы на AWS или TPU на GCP) и при этом не привязываться к одному вендору для хранения. Интеграция уже доступна в последней версии SkyPilot. Документация и примеры — в репозитории проекта.