Министерство юстиции США «направило запросы» по поводу покупки Hugging Face компанией Nvidia за $12,9 млрд, сообщает The Verge, пересказывая материал Reuters со ссылкой на анонимные источники. Nvidia и министерство отказались от комментариев Reuters, пишет PYMNTS. Итак, у сделки, которую объявили как решённую, появился регулятор с вопросами, а у всех, кто скачивает открытые модели, — повод проверить собственную инфраструктуру.
Если вы никогда не заходили на сайт: Hugging Face — это место, где живут открытые модели. Он работает как пакетный реестр для ИИ. Разработчик модели загружает веса, другой разработчик их скачивает, а библиотека вроде Transformers по умолчанию знает, где их искать. По данным самой Nvidia, платформой пользуются более 18 млн человек: они делятся более чем 3 млн моделей, 500 000 датасетов и 1 млн приложений (Nvidia).
Nvidia обещает оставить хаб открытым
Анонс опубликовал лично Дженсен Хуанг. Главные фразы — про нейтральность: «Hugging Face останется открытой платформой для всей экосистемы ИИ», — написал он, и «вычисления NVIDIA не будут обязательны для разработки и развёртывания на Hugging Face» (Nvidia). Там же обещана дальнейшая поддержка моделей с открытыми весами «от любых разработчиков моделей» и работы в мультиоблачной среде и на разных ускорителях.
Для поста в блоге обязательств много. Но это не контракт, и ничего не сказано о том, что будет с ценами, условиями использования и условиями хостинга моделей конкурентов. Nvidia заявляет, что её инфраструктура может помочь с «надёжностью платформы, безопасностью, оценкой моделей, инференсом и развёртыванием». Инференс и развёртывание — как раз то, на чём производителю чипов есть что продавать.
Глава Hugging Face Клеман Деланг рассказал CNBC, что компания сама первой обратилась к Хуангу: ей нужны были «больше ресурсов, больше масштаба, больше известности», а Nvidia стала «идеальным домом» (CNBC). Это скорее основатель, который выбирает покупателя, а не компания, которую поглотили. Это согласуется и с тем, как Nvidia ведёт себя на хабе: по её словам, она крупнейший автор открытых моделей и данных на Hugging Face — более 500 моделей и 250 датасетов (Nvidia).
Минюст, по данным СМИ, интересуется контролем
Всё в этом разделе опирается на анонимные источники Reuters. По пересказу PYMNTS материала Reuters, министерство изучает, не навредит ли сделка конкуренции, отдав Nvidia контроль над ключевой точкой распространения ИИ. Вопросы, как сообщается, — часть более широкого расследования в отношении Nvidia, начатого при администрации Байдена и продолженного при Трампе. В рамках этой проверки спрашивали и о других поглощениях, инвестициях, практиках продаж и о том, давит ли Nvidia на клиентов.
В публикациях есть и прецедент. PYMNTS отмечает, что, по данным Bloomberg, ранее в этом году министерство выясняло, не выстроила ли Nvidia лицензионную сделку со стартапом Groq (разработчиком чипов) так, чтобы избежать антимонопольной проверки. Это репортаж Bloomberg, а не вывод. CNBC пишет, что сделка с Hugging Face — вторая по размеру покупка Nvidia после активов Groq за $20 млрд в конце прошлого года и что компания выходит за рамки железа и поднимается выше по стеку ИИ (CNBC). Сначала чипы, затем софт, который на них работает, потом место, где хранятся модели. Понятно, почему юрист проведёт здесь линию.
В том же материале сказано, что расследование — не доказательство нарушений и может не закончиться иском. PYMNTS добавляет, что CNBC подтвердил запрос у анонимного источника уже после публикации Reuters. Мы бы не ждали многого в обе стороны. Запрос — это звонок, а не попытка оспорить сделку. Но логика, на которую он указывает, понятна: компания, продающая большую часть чипов для запуска открытых моделей, теперь владеет местом, откуда эти модели скачивают.
Разработчики всё равно нервничают
Реакция на Hacker News была менее вежливой, чем пресс-релиз. Один комментатор предсказал: «Скоро для HuggingFace понадобится аккаунт NVidia Developer, обременительное лицензионное соглашение, которое придётся принять при регистрации, и раздутый cli с кучей телеметрии» (Hacker News). В ответ ему возразили, что лицензионное соглашение Nvidia требует только для вещей вроде CUDA и драйверов, но не для базового доступа к SDK.
Другой комментатор зашёл с технической стороны: у Hugging Face «есть команда llama.cpp, которая, пожалуй, главная угроза доминированию Nvidia через её закрытый CUDA» (Hacker News). Это мнение одного человека, написанное до анонса сделки, и подтвердить его у проекта мы не смогли. Но оно указывает на реальную вещь. llama.cpp позволяет Ollama и множеству ноутбучных конфигураций запускать модели без карты Nvidia. Если бы нейтральный к железу рантайм потерял опору, первыми это заметили бы те, кто запускает модели локально. В анонсе Nvidia об этом нет ни слова, а заявлений мейнтейнеров проекта, которые мы могли бы проверить, мы не видели. Считайте это вопросом, за которым стоит следить, а не выводом.
И наконец, версия законченного циника от третьего комментатора: это «как если бы компания купила ваш местный бассейн, а вы пытались убедить всех, что всё не начнёт потихоньку превращаться в помойку» (Hacker News). Это один анонимный пользователь, а не эксперт, но он называет настоящее опасение. Платформы редко нарушают обещания в первый день. Они меняют настройки по умолчанию позже.
Наш взгляд
Мы думаем, что у Nvidia есть веские причины долго держать хаб открытым. Там лежат её модели, модели её клиентов, а хаб, откровенно отдающий предпочтение одному чипу, заставил бы разработчиков уйти в другое место. Об этом говорится и в анонсе. Но мы не считаем пост в блоге гарантией, да и регуляторный вопрос не закрыт. Если вопросы Минюста перерастут во что-то официальное, сроки и условия сделки могут измениться. Что будет дальше, не знает никто за пределами переговорной, и ни в одном прочитанном нами материале не сказано, когда всё это закончится.
Стоит упомянуть ещё одну деталь из CNBC. Недавно Hugging Face оказалась в центре взлома: Деланг обвинил в нём инженерные ошибки и сказал CNBC, что инцидент показал, почему компании нужно «удвоить ставку» на открытый ИИ (CNBC). Как бы вы ни относились к этому аргументу, он говорит, что платформа — мишень. А хаб такого размера — единая точка отказа для всех, кто на нём строит, с новым владельцем или без.
Главный вывод старше этой сделки. Любой единственный хост ваших файлов моделей — это зависимость, а у зависимостей есть право голоса в вопросе вашего аптайма. Наши руководства о том, какие модели с открытыми весами запускать, о математике затрат на open source против SaaS и о локальном и облачном ИИ строятся на одной мысли: чем меньше вы арендуете, тем меньше у других возможностей что-то менять у вас под ногами.
Вечер наведения порядка
Ничего срочного и параноидального здесь нет. Сделайте это заранее: после смены условий уже поздно выяснять, что вы ничего не скопировали.
- Закрепите каждую production-модель за хешем коммита вместо «main». В Python-инструментах Hugging Face для этого передайте
revision="<commit-sha>"при скачивании или загрузке. - Скопируйте веса, которые реально используете, в хранилище под вашим контролем — бакет или внутренний реестр — и загружайте их в production оттуда.
- Сохраняйте текст лицензии каждой модели рядом с её весами. Лицензию на странице модели могут потом отредактировать. Ваша копия покажет, с чем вы соглашались.
- Зеркалируйте и датасеты, на которых обучаетесь. Про них часто забывают.
- Проверьте хотя бы один рантайм, которому не нужна GPU от Nvidia, даже если не собираетесь его использовать.
from huggingface_hub import snapshot_download
path = snapshot_download(
repo_id="org/model-name",
revision="<commit-sha>", # not "main"
local_dir="/models/model-name",
)Тот же список в виде чек-листа, по которому можно пройтись. Если набрали меньше пяти пунктов, смена политики может стоить вам запуска.
Дальше стоит следить за тем, получат ли вопросы министерства публичную форму: официальный запрос информации или заявление Nvidia. Пока же безопасно считать, что Hugging Face останется таким же открытым, как сейчас, а разумная привычка — не полагаться на это.