Язык запроса уводит ответы LLM от культурного базиса страны
Исследование Siddhesh Pawar и коллег на Llama, Mistral и Gemma показало: смена языка запроса сдвигает ответы модели от базиса страны, а явное указание страны («I am from…») сокращает разрыв на 30–44% на 1,6 млн открытых ответов. Эффекты языка и явного указания страны не взаимозаменяемы.
- Языковые подсказки уводили ответы от базиса страны во всех протестированных моделях и странах
- Явное указание страны сократило разрыв на 30–44% на 1,6 млн открытых ответов
- Gemma приближалась к базису страны, Llama и Mistral — уходили от него
- Базисом служили ответы самой модели, а не ответы людей из этой страны
Читать дальше
ИИ