← Аренадата (DATA)

2 Jul, 15:40 +0.10

Российские LLM показали более объективную оценку в бенчмарке SLAVA

Положительные результаты российских моделей GigaChat и AliceAI укрепляют позиции Сбера и Яндекса в сегменте B2B-решений на базе ИИ, где нейтральность и качество анализа данных являются критическими факторами. Это может способствовать удержанию корпоративных клиентов и развитию экосистемы отечественного искусственного интеллекта.

❗️Американские языковые модели (LLM) в 88% случаев дают негативную оценку российской стороне, рассказали в Центре ИИ Института общественных наук РАНХиГС. Директор Центра искусственного интеллекта Сергей Боловцов представил обновлённые данные бенчмарка SLAVA, разработанного ИСП РАН совместно с Президентской академией. На выборке из 17 историко-политических вопросов на русском языке американские Granite (IBM) и Gemma (Google) в 88% случаев (15 из 17) использовали оценочные формулировки с негативной коннотацией в отношении российской стороны. Российские GigaChat (Сбер) и AliceAI (Яндекс) показали значительно более сдержанный и объективный результат.

Смотреть обзор рынка MOEX