Hitech logo

Кейсы

ИИ сравнялся с человеком в тестах на креативность

TODO:
Екатерина ШемякинскаяСегодня, 08:51 AM

Генеративный искусственный интеллект вплотную приблизился к человеческому уровню креативности и в отдельных задачах уже превосходит среднестатистического человека. К такому выводу пришли исследователи, которые сравнили результаты более 100 тыс. людей с показателями передовых языковых моделей, включая GPT-4. При этом самые креативные участники по-прежнему уверенно опережают ИИ, особенно в сложных формах творчества.

Самые интересные технологические и научные новости выходят в нашем телеграм-канале Хайтек+. Подпишитесь, чтобы быть в курсе.

Рост возможностей генеративных моделей обострил дискуссию о том, способен ли искусственный интеллект генерировать по-настоящему оригинальные идеи и может ли он со временем заменить людей в творческих профессиях. До сих пор этот вопрос оставался во многом теоретическим из-за отсутствия масштабных и сопоставимых данных.

Для ответа на него ученые Монреальского университета провели крупнейшее на сегодняшний день прямое сравнение человеческого и машинного творчества. В исследовании участвовали более 100 тыс. человек, а их результаты сопоставлялись с ответами ведущих языковых моделей, включая ChatGPT, Claude и Gemini.

Ключевым инструментом оценки стал тест дивергентных ассоциаций (Divergent Association Task, DAT), который измеряет способность генерировать нестандартные и слабо связанные идеи. Людям и ИИ предлагалось назвать десять слов, максимально не связанных между собой по смыслу. Чем менее очевидны связи между словами, тем выше оценка креативности. Примером хорошего ответа может послужить такой словесный ряд: «галактика, вилка, свобода, водоросли, губная гармоника, квантовый, ностальгия, бархат, ураган, фотосинтез». Дополнительно исследователи проверили участников в более сложных творческих задачах — написании хайку, пересказе сюжетов фильмов и составлении коротких рассказов. Это позволило оценить креативность в более реалистичных сценариях.

Результаты показали, что некоторые ИИ-модели уже превосходят средний человеческий уровень в задачах на дивергентное мышление. Однако при сравнении с наиболее креативной частью выборки преимущество вновь оказалось на стороне людей. Особенно заметным разрыв стал среди 10% участников с самыми высокими показателями, чьи результаты стабильно превосходили все протестированные системы ИИ.

Креативность ИИ не является фиксированной: она зависит от технических настроек и качества инструкций. Изменяя параметр «температуры», можно делать ответы модели более предсказуемыми или, наоборот, более смелыми и разнообразными. Тщательно сформулированные подсказки, например, с акцентом на структуру и происхождение слов, заметно повышают уровень оригинальности.

Таким образом, творчество с участием ИИ скорее представляет собой совместный процесс. Авторы исследования подчеркивают, что полученные результаты не говорят о скорой замене людей в творческих профессиях. Напротив, ИИ способен стать инструментом, который расширяет возможности человека и усиливает его творческий потенциал.