Разработчик протестировал Алису и Гигачат по 5 бенчмаркам

Независимый разработчик Leite провел двухнедельное тестирование российских ИИ-ассистентов Алисы (Яндекс) и Гигачата (Сбер) по пяти бенчмаркам. Алиса тестировалась через веб-коннектор в условиях реального использования и в 90% случаев переключалась на упрощенную модель при повышенной нагрузке.

В тестирование вошли Гигачат Ультра и Гигачат Макс. Автор отметил, что сами компании не проводят регулярное бенчмаркирование, хотя это помогло бы понять позицию моделей относительно мировых лидеров.