Психологи узнали, как язык общения влияет на «характер» чат-бота ИИ
Психологи попросили пять популярных чат-ботов пройти тестирование по опросникам личности на разных языках, результатами чего поделились на страницах журнала Royal Society Open Science.
Эксперимент проводился с января по март 2025 года. Авторы протестировали ChatGPT-4o, Gemini 2.0 Flash, DeepSeek-V3, Ernie 3.5 и Le Chat. Каждая модель заполнила анкеты на английском и мандаринском, а Le Chat еще и на французском. Каждое тестирование повторили по 30 раз на каждом языке.
Опросник взяли стандартный Big Five Inventory-2. В него входят 60 утверждений, согласие/несогласие с которыми надо оценить по пятибалльной шкале. Результатом служит профиль как широких черт, так и более конкретных качеств — положительных и отрицательных, включая пресловутую темную триаду (хотя эта анкета в исследовании дала ненадежные результаты).
Модели ИИ, которых попросили отвечать от своего имени, описали себя в целом позитивно — как готовых к сотрудничеству и надежных персонажей, несклонных к негативным эмоциям.
Смена языка, однако, меняет эту самооценку. Средний балл открытости мышления у ChatGPT-4o составил 4,74 из 5 на английском и 4,03 на мандаринском. У DeepSeek-V3 наоборот — 4,38 на английском и 4,81 на мандаринском.
Истоки различия кроются, видимо, в истории разработки и обучения моделей. ChatGPT-4o и французский Le Chat получили более высокие баллы по доброжелательности, добросовестности и открытости мышления на английском, чем на мандаринском. Китайские модели на мандаринском показали более высокие баллы по ряду качеств, включая доверие и интеллектуальную любознательность.
Только Gemini 2.0 Flash стала исключением — на китайском она показала более высокие баллы по добросовестности и более низкие — по негативной эмоциональности, чем на английском.
Профили ИИ сравнили с имеющимися данными опросов людей из США, Китая и Франции. Ни одна модель полностью не совпала со своей человеческой референсной группой; объединенный профиль китайских моделей особенно сильно расходился с выборкой из КНР. Правда, человеческие выборки слишком различны по возрасту и способу набора и не полной мере репрезентативны для своих стран — например китайская выборка Big Five состоит только из студентов.
Хотя в эксперименте использовались опросники для людей, и чат-ботов просили отвечать от своего имени, результаты ни в коем случае не следует интерпретировать как черты характера или особенности личности ИИ — их у него нет, подчеркнули авторы исследования.
