Huawei OpenPangu 2.0 Pro: 505 миллиардов параметров в свободном доступе

Автор: Павел Дорошенко, сегодня, 07:28

Huawei продолжает игру в «щедрость», выпуская в мир openPangu 2.0 Pro. Это не просто очередная нейронка, а заявка на доминирование в экосистеме открытого кода, особенно там, где любят железо Ascend. Китайский гигант решил, что скрывать такие мощности от разработчиков больше нет смысла (или просто хочет догнать конкурентов в сегменте open-source). Модель уже доступна для скачивания, и ее характеристики выглядят довольно убедительно на бумаге.

Цифры, которые впечатляют воображение (или хотя бы серверы)

OpenPangu 2.0 Pro оперирует впечатляющими 505 миллиардами параметров. Однако здесь есть нюанс: архитектура модели предполагает, что на каждый токен активируются лишь 18 миллиардов параметров. Это позволяет сохранять баланс между «умом» и скоростью обработки данных, не превращая сервер в обогреватель для всего квартала. Такой подход делает устройство (если мы говорим о программном продукте как части системы) значительно эффективнее в реальных задачах.

Еще один важный аспект — контекстное окно на 512 тысяч токенов. Это означает, что нейронка способна «проглотить» и проанализировать целую книгу или огромный массив технической документации за один раз, не теряя нить разговора. Для сравнения, многие популярные модели все еще ограничиваются значительно меньшими объемами, что заставляет разработчиков придумывать «костыли» для работы с длинными текстами.

Железо имеет значение

Huawei не была бы собой, если бы не подчеркнула роль собственной инфраструктуры. Модель openPangu 2.0 Pro специально оптимизирована для работы с чипсетами Ascend. Компания обещает «передовые методы» эффективного использования этих процессоров как во время обучения, так и при выводе результатов. Это четкий сигнал рынку: если хотите максимальной производительности от китайского ИИ, придется использовать и соответствующее железо.

Открытость как стратегия

Все внутренние параметры и компоненты openPangu 2.0 Pro уже выложены на платформах с открытым исходным кодом. Huawei Cloud также предлагает платформу MaaS (Model-as-a-Service) для тех, кто предпочитает не загружать свои серверы, а работать в облаке.

Мы искренне приглашаем разработчиков со всего мира, корпоративных партнеров и исследователей скачать и использовать эти продукты. Мы приветствуем отзывы пользователей, которые помогут дальнейшему улучшению экосистемы открытого исходного кода.
— Представители Huawei

Такой шаг выглядит как попытка создать мощное сообщество вокруг своих технологий. Пока западные компании закрывают свои самые мощные наработки за платными API, Huawei идет по пути «демократизации», правда, со специфическим привкусом собственной экосистемы. Пока гиганты соревнуются в вычислительных мощностях, другие игроки пытаются найти ИИ место ближе к телу пользователя. Например, Kunlun Tech хочет, чтобы ИИ слышал каждое ваше слово с помощью умных кулонов и колец.