ИИ переоценивает уровень интеллекта людей — экономисты
Ученые из НИУ ВШЭ обнаружили, что современные модели искусственного интеллекта, такие как ChatGPT и Claude, склонны переоценивать рациональность людей в стратегических играх. Исследование показало, что ИИ часто считает людей более логичными, чем те есть на самом деле, что приводит к ошибкам в предсказаниях и проигрышу в игре. Результаты работы опубликованы в Journal of Economic Behavior & Organization.
Эксперимент проводился на примере «кейнсианского конкурса красоты». Этот концепт был предложен британским экономистом Джоном Мейнардом Кейнсом в 1930-х годах. В классическом примере участникам предлагается выбрать шесть самых привлекательных лиц из 100 фотографий, а победителем становится тот, чьи выборы наиболее близки к выбору большинства. Важно не то, какие лица нравятся лично участнику, а то, какие лица будут выбраны другими участниками.
Эксперимент с искусственным интеллектом
В этом исследовании ученые предложили пяти наиболее популярным ИИ-моделям, включая ChatGPT и Claude-Sonnet-4, сыграть в игру «Угадай число» — вариацию кейнсианского конкурса красоты. В этой игре участники выбирают число от 0 до 100, а победителем становится тот, чье число оказывается ближе всего к половине от среднего значения всех выборов. Модели ИИ, как и люди, должны предсказать, что выберут другие участники, чтобы выиграть.
Исследование показало, что ИИ часто ошибается, переоценивая рациональность людей, особенно когда они не знакомы с теорией игр или обладают различным уровнем когнитивных способностей.
Например, студенты магистратуры, играя против более опытных участников, выбирали числа, близкие к 0, что является выигрышной стратегией. В то время как при игре с менее опытными студентами они выбирали более высокие числа, ожидая более интуитивных решений.
Экономическое значение исследования
Исследование важно не только для теории игр, но и для экономики. Концепция кейнсианского конкурса красоты используется для объяснения колебаний на финансовых рынках, где брокеры принимают решения, опираясь не на свои предпочтения, а на то, как другие участники рынка оценят акции. Это же правило действует и в задачах ИИ, где успех зависит от способности модели предсказать поведение других.
«Сейчас модели ИИ начинают заменять людей во многих бизнес-процессах, обеспечивая повышение эффективности. Однако важно, чтобы ИИ вел себя как человек в стратегических ситуациях, иначе они могут допускать ошибки. Мы ожидаем, что эта область будет быстро развиваться», — отметил Дмитрий Дагаев, руководитель исследования.
Исследования такого рода помогают улучшить понимание того, как искусственный интеллект может более точно моделировать человеческое поведение в стратегических играх и других сложных ситуациях.
