Просто о сложном

LLM-платформы и инференс, что это и какие бывают

22 августа, 08:00

LLM-платформы и инференс. On-premise LLM-платформы для развёртывания и инференса больших языковых моделей в корпоративной инфраструктуре

Решения обычно сравнивают по Сквозные технологии, Модель развертывания, Поддерживаемые ОС, Интеграция с государственными системами, Соответствие российскому законодательству.

10 решений, которые сейчас в лидерах

  1. GigaChat - GigaChat от компании Сбер — российский программный продукт из реестра отечественного ПО, включённый в топ-аналитику по своей категории. Используется в категории: GigaChat, GigaChat 2, GigaChat MAX. Применяется в корпорат… (оценка 2.9 из 5, 8 отзывов)
  2. ELMA BOT - ELMA BOT — российский программный продукт из реестра отечественного ПО, включённый в топ-аналитику по своей категории. Используется в категории: ELMA Bot. Применяется в корпоративном секторе и государственных организация… (оценка 4.3 из 5, 1 отзыв) - награда В реестре отечественного ПО
  3. База данных Яндекс.Музыки - База данных Яндекс.Музыки от компании Yandex Cloud — российский программный продукт из реестра отечественного ПО, включённый в топ-аналитику по своей категории. Используется в категории: Yandex Database. Применяется в ко…
  4. ChatRex — платформа ИИ-ассистентов для продаж и поддержки - Облачная платформа для создания ИИ-ассистентов, которые отвечают клиентам, квалифицируют обращения и выполняют действия в CRM и бизнес-системах.
  5. LLM Agent - Helprobot LLM АгентLLM АгентЛЛМ АгентLLM agent beta
  6. YandexGPT - YandexGPT — семейство больших языковых моделей от Яндекса (версии 4, 5, 5.1 Pro/Lite). Доступны через Yandex Cloud API (Foundation Models). Поддерживают контекст до 128 000 токенов. Лидируют в SLAVA и MERA бенчмарках сре…
  7. Kolmogorov.ai Axiom - Kolmogorov.ai Axiom от компании Kolmogorov AI — российский программный продукт из реестра отечественного ПО, включённый в топ-аналитику по своей категории. Используется в категории: Kolmogorov AI, Kolmogorov.ai. Применяе… - награда В реестре отечественного ПО
  8. Alice AI LLM - Alice AI LLM — флагманская языковая модель Яндекса. Лидер бенчмарка SLAVA. Оптимизирована для диалогов, извлечения контекста и задач ИИ-ассистента. Доступна через Yandex Cloud API.
  9. Alpina Digital - Платформа для корпоративной электронной библиотеки
  10. SimpleOne GenAI

И ещё 1 решение

Как именно считается место в списке, подробно расписано на странице Призмы.

Все детали и полный список - в Призме LLM-платформы и инференс и топе LLM-платформы и инференс 2026.