Зачем это исследование
Отдельные рейтинги всё хуже отражают прикладную эффективность моделей, поэтому мы собрали прямые ответы практиков — что они реально смотрят и как тестируют — и свели это в карту ключевых сигналов для выбора LLM-решений.
«Оценить один из самых быстрорастущих и востребованных рынков сегодня только по закрытым опросам или аналитическим отчётам невозможно. Чтобы получить честную и объёмную картину происходящего в сфере LLM, мы собрали прямые ответы от практиков с их реальными бизнес-кейсами. Это позволяет понять, по какой логике компании выбирают решения, и — главное — показать эти инсайты самому рынку»,
45
отобранных специалистов
2025
июль-август
100%
респондентов с практическим опытом с LLM-продуктами
TL/DR Выбор модели становится комплексной инженерной задачей:
- 82,2% проводят собственные тесты; бенчмарки — вспомогательный сигнал, а не финальный ответ.
- 26,7% вообще не используют бенчмарки; лишь ≈18% пользуются аналитическими ресурсами наподобие llm-stats.com, artificialanalysis.ai.
- Цели выбора LLM: баланс качества/цены/скорости, устойчивость без галлюцинаций и вписывание в имеющуюся инфраструктуру.
