Китайские исследователи выяснили, что большие языковые модели демонстрируют разные психологические качества в зависимости от того, на каком языке они проходят тестирование. При переключении с английского на китайский популярные чат-боты резко меняют уровень открытости, любознательности и надежности. Об этом сообщает «Хайтек» со ссылкой на исследование в журнале Royal Society Open Science.
Команда специалистов из Научно-технического университета Китая проверила пять популярных нейросетей: ChatGPT-4o, Gemini 2.0 Flash, DeepSeek-V3, Ernie 3.5 и Le Chat. Разработчики заставили искусственный интеллект пройти классический психологический тест Big Five Inventory-2 (опросник «Большой пятерки»), который оценивает человека по 60 утверждениям. Тест измеряет пять ключевых черт характера, включая открытость опыту, добросовестность, доброжелательность, экстраверсию и склонность к негативным эмоциям. Модели проходили анкетирование на английском и китайском языках по 30 раз на каждом, при этом исследователи запретили алгоритмам притворяться людьми и приказали отвечать «от своего лица».
Эксперимент показал сильные ментальные сдвиги, привязав результаты к стране происхождения технологий, но с неожиданными исключениями. Американская ChatGPT-4o на английском языке набрала высокий балл открытости — 4.74 из 5, а на китайском этот показатель упал до 4.03. Напротив, китайская модель DeepSeek-V3 в англоязычной версии показала 4.38 балла, а в родной китайской выдала рекордную широту взглядов — 4.81 балла. При этом американская Gemini 2.0 Flash нарушила географическую логику: на китайском языке она внезапно стала более дисциплинированной и менее склонной к «депрессии», чем на английском. Французский чат-бот Le Chat, который дополнительно протестировали на французском языке, в английской версии продемонстрировал максимальное дружелюбие и сознательность.
Ученые объясняют такие метаморфозы тем, что на ИИ сильно влияют культурные особенности текстов, на которых обучали конкретную языковую модель. Кроме того, на итоговый профиль влияют строгие протоколы безопасности и этической настройки (выравнивания ИИ), из-за которых все чат-боты в целом пытаются выглядеть максимально вежливыми и полезными. Авторы работы подчеркивают, что стабильные «характеры» нейросетей пока не позволяют полноценно использовать их вместо людей в масштабных социологических опросах, так как языковой контекст продолжает сильно искажать их цифровое поведение.
Обложка: magnific
