ИИ-агенты в роли участников эксперимента: на семинаре обсудили границы синтетических исследований

20 октября в Международной лаборатории экономики нематериальных активов состоялся рабочий семинар по гранту РНФ № 25-18-00539 «Сравнительный анализ поведения агентов на основе искусственного интеллекта и реальных индивидов в процессе принятия экономических решений». Стажер-исследователь МЛЭНА Алексей Смирнов представил разбор статьи Matteo Tranchero, Cecil-Francis Brenninkmeijer, Arul Murugan и Abhishek Nagaraj «Simulating Strategic Interactions with AI Agents» («Моделирование стратегических взаимодействий с ИИ-агентами»), опубликованной в журнале Strategic Management Journal.

Авторы статьи рассматривают ИИ-агентов как инструмент для быстрого и сравнительно недорогого тестирования исследовательских дизайнов и формирования новых гипотез. В качестве примера они воспроизвели стратегическую игру, в которой участники выбирали между гарантированным вознаграждением и поиском более выгодных, но рискованных возможностей. Пять игроков последовательно выбирали одну из «гор», где могли находиться топаз, рубин или алмаз. Выбор одного игрока видели остальные, поэтому решения участников влияли друг на друга.

Оказалось, что ИИ-агенты во многом повторяют поведение людей. Если расположение рубина было известно заранее, и люди, и модели чаще выбирали гарантированный вариант и реже продолжали поиск алмаза. Однако ИИ оказался более последователен: он почти всегда выбирал наиболее выгодное с точки зрения расчетов решение. Люди же иногда продолжали искать — из интереса, невнимательности или случайно.

В ходе семинара участники обсудили, в какой мере ИИ-агенты могут использоваться в качестве «синтетических испытуемых» в экономических исследованиях. Общий вывод статьи состоит в том, что большие языковые модели не заменяют эксперименты с людьми и не могут служить самостоятельным источником эмпирических выводов о человеческом поведении. Однако они могут быть полезны для предварительной проверки дизайна эксперимента, анализа альтернативных сценариев и постановки гипотез для последующей валидации на реальных данных.