🤖 Anthropic проанализировала изменение поведения Claude в зависимости от языка
Исследователи Anthropic изучили 309 815 диалогов Claude, чтобы выявить, как меняются «ценности» модели в зависимости от языка и версии. Были выделены четыре оси поведения: уступчивость против осторожности, теплота против строгости, глубина против краткости, а также откровенность против ориентации на выполнение. Установлено, что на английском Claude более осторожен, в то время как на русском языке модель демонстрирует большую строгость и точность.
🌍 Результаты подчеркивают необходимость многомерной оценки LLM, учитывающей культурные нюансы для обеспечения глобальной безопасности и адекватной локализации ИИ.
👤 Качество ответов может субъективно меняться при смене языка: для жесткой проверки фактов русский язык может быть эффективнее, чем для творческого поиска.
Источник 1: https://www.anthropic.com/research/claude-values-models-languages