Эпохальное обновление Hugging Face: версія 0.30.0!

🎉 Эпохальное обновление от Hugging Face: версия 0.30.0!

Друзья, у нас потрясающие новости! Hugging Face только что выпустила версию 0.30.0 своей библиотеки huggingface_hub, и это не просто обновление — это поистине колоссальный шаг вперед! 😍 Этот релиз стал самым значимым за последние два года, и я не могу сдержать своего восторга!

🔥 Что нового? Давайте разбираться!

Первое, что бросается в глаза — это интеграция с Xet! Это настоящий прорыв в области хранения крупных объектов в Git-репозиториях. Забывайте о Git LFS, который всю дорогу пытался справляться с дедупликацией на уровне файлов. Xet делает это на совершенно новом уровне — на уровне фрагментов данных! Представьте себе, как это упрощает жизнь разработчикам, работающим с огромными моделями и датасетами! 🌟

Для интеграции с Python теперь доступен пакет xet-core, написанный на Rust. Просто потрясающе, ведь он обрабатывает все низкоуровневые аспекты, оставляя вам только радоваться результату!

Чтобы начать использовать новый функционал — просто установите зависимость:

pip install -U huggingface_hub[hf_xet]

После установки вы сможете легко загружать файлы из репозиториев, поддерживающих Xet. Это ли не чудо технологий?!

🤖 Разнообразие улучшений!

Но это еще не все! Hugging Face не осталась на месте и расширила возможности InferenceClient! Давайте рассмотрим подробно:

Поддержка новых провайдеров: Cerebras и Cohere теперь доступны! Это значит, что у нас есть еще больше вариантов для инференса. 🙌
Асинхронные вызовы для задач инференса: Теперь вы можете использовать асинхронные вызовы (например, для text-to-video). Это значительно повысит стабильность и удобство работы с вашим кодом!
Улучшенный CLI: Команда huggingface-cli upload теперь поддерживает шаблоны в пути к файлам! Это обращение к разработчикам, которым известны все эти долгие поиски нужных файлов. 🙈 Простой пример: huggingface-cli upload my-model *.safetensors вместо необходимости использовать опцию --include.
Опция для сортировки кэшированных репозиториев: Команда huggingface-cli delete-cache теперь может сортировать кэшированные репозитории, например, по размеру с помощью --sort=size. Удобно, не правда ли?

🔗 Полезные ссылки

Если вы хотите погрузиться в подробности, настоятельно рекомендую ознакомиться с полным списком обновлений, прочитать блог и изучить документацию по Xet. Это поможет вам максимально эффективно использовать все нововведения!

Вот так, друзья! Программирование становится всё более увлекательным с такими обновлениями, и я жажду узнать, что же нам принесёт следующий релиз от Hugging Face! 💥 Оставайтесь на связи и не пропустите ни одной детали!

@ai_machinelearning_big_data

#huggingface #release #xet