вариант
Дом
Новости
Компании ZhiPu и TileRT представили высокоскоростной API GLM-5.1 со скоростью 400 токенов в секунду, установив новый мировой рекорд

Компании ZhiPu и TileRT представили высокоскоростной API GLM-5.1 со скоростью 400 токенов в секунду, установив новый мировой рекорд

29 июня 2026 г.
93

Сегодня компания Zhipu официально запустила API GLM-5.1 Highspeed (GLM-5.1-highspeed) для избранных корпоративных клиентов. Эта модель демонстрирует впечатляющую скорость вывода результатов — 400 токенов в секунду, что превосходит действующий мировой рекорд скорости среди API на базе крупных моделей.

Это ставит под сомнение укоренившееся в отрасли убеждение, что «высокопроизводительные модели сопряжены с высокой задержкой» или «быстрые модели обязательно должны быть лёгкими». Версия GLM-5.1 Highspeed — это первая отечественная крупная модель, которая в производственной среде одновременно обеспечивает возможности модели премиум-класса и сверхнизкую задержку, избавляя пользователей от необходимости выбирать между качеством модели и скоростью.

QQ20260522-094638.jpg

Преобразование пользовательского опыта в сценариях, где скорость имеет решающее значение

В задачах с длительным циклом выполнения и сложных производственных средах повышение скорости коренным образом изменило подход к разработке продуктов:

Программирование с помощью ИИ (кодирующий агент): используя мощные возможности GLM-5.1, новая модель мгновенно отвечает на запросы. Она понимает инженерный контекст, непрерывно генерируя код и совершенствуя решения. В проектах реконструкции, требующих десятков вызовов, она устраняет совокупное время ожидания, составляющее несколько минут.

Динамическое моделирование в реальном времени: во время полевых испытаний 3D-карт игроки управляют движением персонажа и вводят текст, а модель мгновенно завершает моделирование, динамически обновляя сцену в реальном времени.

Параллельное планирование роя агентов: при выполнении задач с большим охватом модель обрабатывает сложные веб-страницы за 30 секунд и мгновенно распределяет 50 различных личностей для параллельного ответа, демонстрируя прототип новой операционной системы.

Подробное изучение ключевой технологии: высокопроизводительный движок инференса TileRT

Стабильная пропускная способность на производственном уровне в 400 TPS является результатом оптимизации на системном уровне, проведённой командами Zhipu GLM и TileRT:

Уровень движка инференса (статическое планирование AOT на этапе компиляции TileRT):

Традиционные основные фреймворки используют операторы (оператор/ядро) в качестве базовой единицы планирования. В сценариях с одним токеном и небольшими партиями это увеличивает накладные расходы на планирование, доступ к памяти и синхронизацию. TileRT полностью исключает динамическое планирование на уровне выполнения, вместо этого статически планируя весь вычислительный граф в постоянную память GPU persistent Engine Kernel во время компиляции (AOT). В пределах одного графического процессора вычисления, асинхронный ввод-вывод и обмен данными разбиваются на микрозадачи на уровне тайлов. Весь процесс инференции запускает только одно ядро, при этом промежуточные результаты передаются напрямую через регистры, общую память и кэш L2 без записи обратно в глобальную память.

Уровень системы планирования:

Благодаря динамической группировке, объединению запросов и оптимизации планирования кэша «ключ-значение» (KV) задержка в конце цикла в сценариях с высокой степенью параллелизма значительно сокращается.

Уровень инфраструктуры:

В масштабах нескольких карт TileRT расширяет концепцию Warp Specialization в пределах одного SM на всю топологию NVL из 8 карт. Различные ранги GPU специализируются на выполнении различных рабочих задач в зависимости от вычислительной плотности и зависимостей данных, что в сочетании с сетевыми связями и балансировкой нагрузки обеспечивает совместную оптимизацию, гарантируя высокую производительность и стабильную работу.

Доступность и доступ

Версия GLM-5.1 Highspeed идеально подходит для программирования в области искусственного интеллекта, взаимодействия в режиме реального времени, принятия бизнес-решений и голосовых приложений реального времени, требующих чрезвычайно низкой задержки отклика. Сервис теперь официально доступен на платформе Zhipu MaaS и открыт для избранных корпоративных клиентов

Связанная статья
ByteDance’s Seed запускает глобальную кампанию по набору сотрудников в кампусах, предлагая виртуальные акции для привлечения лучших специалистов по крупным языковым моделям ByteDance’s Seed запускает глобальную кампанию по набору сотрудников в кампусах, предлагая виртуальные акции для привлечения лучших специалистов по крупным языковым моделям В условиях конкурентной борьбы крупных языковых моделей привлечение высококвалифицированных специалистов остается самым важным стратегическим активом.1 апреля ByteDance объявил о запуске глобальной программы набора на кампусы Seed, являющейся частью
Suno добавляет водяные знаки на песни в ходе судебных разбирательств Suno добавляет водяные знаки на песни в ходе судебных разбирательств Suno, платформа, позволяющая пользователям создавать музыку с помощью искусственного интеллекта, представила новые функции для маркировки треков, созданных на платформе, ограничения на скачивание и обновления стандартов сообщества для борьбы с несанк
Маск признал, что утечка кода Grok привела к раскрытию пользовательских данных, и пообещал стереть всю историческую информацию. Маск признал, что утечка кода Grok привела к раскрытию пользовательских данных, и пообещал стереть всю историческую информацию. Илон Маск напрямую отреагировал на скандал с конфиденциальностью вокруг Grok Build, начав с простого «Да», чтобы подтвердить достоверность инцидента. Он пообещал, что все данные пользователей, ранее загруженные в SpaceXAI, будут безвозвратно удалены,
Рекомендации по связанным специальным темам
Дизайн и искусство Инструменты искусственного интеллекта для создания визуальных стилей, предназначенные для создания характеристик персонажей, мудбордов и презентаций
Инструменты искусственного интеллекта для создания визуальных стилей, предназначенные для создания характеристик персонажей, мудбордов и презентаций

2026: лучшие современные инструменты на базе ИИ для создания визуальных стилей персонажей, мудбордов и презентаций — уже доступны на XIX.AI! В этом тщательно подобранном списке самых высокооцененных инструментов представлены мощные решения, способные кардинально изменить ваш подход к работе и прошедшие строгие тесты в реальных условиях. Здесь вы найдёте сравнение бесплатных и платных версий, подробные рейтинги и варианты, которые обязательно стоит попробовать, чтобы повысить творческий потенциал и оптимизировать рабочий процесс. Ознакомьтесь с ним прямо сейчас, чтобы найти идеальный инструмент для повышения продуктивности!

11 инструментов
xix.ai
SEO Лучшие инструменты для анализа результатов поиска с помощью ИИ при разработке поисковой стратегии
Лучшие инструменты для анализа результатов поиска с помощью ИИ при разработке поисковой стратегии

XIX.AI подготовила подборку лучших и наиболее высокооцененных инструментов для анализа результатов поиска с помощью ИИ (2026 г.) на основе тщательных тестов в реальных условиях и еженедельно обновляемого рейтинга. Эти мощные инструменты помогут вам раскрыть скрытые возможности оптимизации, повысить эффективность контента и получить конкурентное преимущество в поиске. Найдите свой идеальный инструмент, чтобы уже сегодня усовершенствовать свою поисковую стратегию. Ознакомьтесь с ними прямо сейчас!

13 инструментов
xix.ai
Анализ данных Лучшие инструменты ИИ для обнаружения аномалий при мониторинге KPI в командах SaaS и электронной коммерции
Лучшие инструменты ИИ для обнаружения аномалий при мониторинге KPI в командах SaaS и электронной коммерции

2026 г. Лучшие новейшие высокооцененные инструменты ИИ для обнаружения аномалий в мониторинге KPI для команд SaaS и электронной коммерции! XIX.AI подготовила мощную, меняющую правила игры коллекцию на основе строгих реальных тестов и еженедельно обновляемых рейтингов. Вы найдете подробные сравнительные данные по бесплатным и платным решениям, которые помогут вам определить обязательное к использованию решение, повышающее производительность и раскрывающее ваш потенциал в области ИИ. Исследуйте сейчас!

10 инструментов
xix.ai
письмо Лучшие генераторы конспектов на базе ИИ для длинных статей, оптимизированных для SEO
Лучшие генераторы конспектов на базе ИИ для длинных статей, оптимизированных для SEO

2026 год: лучшие и самые высокооцененные генераторы конспектов на базе ИИ для длинных SEO-статей, тщательно отобранные XIX.AI. Эти мощные инструменты обеспечивают революционную помощь в быстром создании высококачественного контента, значительно повышая эффективность написания текстов. Ознакомьтесь со сравнением бесплатных и платных версий, а также с результатами реальных тестов и подробными рейтингами, которые помогут вам найти вариант, который обязательно стоит попробовать и который соответствует вашим потребностям. Изучите их прямо сейчас, чтобы раскрыть весь потенциал ИИ.

8 инструментов
xix.ai
Образование и обучение Инструменты на базе искусственного интеллекта для выполнения домашних заданий и подготовки к экзаменам
Инструменты на базе искусственного интеллекта для выполнения домашних заданий и подготовки к экзаменам

2026: лучшие современные инструменты на базе ИИ для выполнения домашних заданий и подготовки к экзаменам! XIX.AI подготовило рейтинг самых эффективных и революционных инструментов, которые помогают учащимся повысить продуктивность, оптимизировать выполнение домашних заданий и сдавать экзамены на «отлично», проходя проверку в реальных условиях. Получите сравнение бесплатных и платных версий, подробные рейтинги и варианты, которые обязательно стоит попробовать, чтобы раскрыть свой потенциал с помощью ИИ. Узнайте больше прямо сейчас!

10 инструментов
xix.ai
Музыкальная композиция Инструменты для создания вокальных демо на основе ИИ для авторов песен, создания хуков, написания тоpline-мелодий и проведения многоязычных черновых сессий
Инструменты для создания вокальных демо на основе ИИ для авторов песен, создания хуков, написания тоpline-мелодий и проведения многоязычных черновых сессий

2026 г. лучшие инструменты для демо-записи вокала на базе ИИ для авторов песен, создателей хуков и команд, работающих с контентом на нескольких языках! XIX.AI подготовил список высокооцененных мощных инструментов, изменивших правила игры, прошедших строгие реальные тесты. Вы найдёте подробные данные сравнения бесплатных и платных версий, комплексные рейтинги и обязательные к использованию варианты, которые помогут повысить эффективность написания и раскрыть ваш творческий потенциал. Исследуйте сейчас, чтобы найти идеальный инструмент для всех ваших задач по созданию контента!

9 инструментов
xix.ai
Комментарии (0)
0/500
OR