Чат-боты с искусственным интеллектом демонстрируют высокую креативность, но люди по-прежнему превосходят их в тестах на дивергентное мышление

В новаторском исследовании ученые выявили интригующую динамику взаимодействия между человеческим творчеством и искусственным интеллектом (ИИ). Хотя чат-боты на основе ИИ, особенно ChatGPT4, продемонстрировали исключительную креативность, они не всегда превосходили самых креативных участников-людей. Вместо этого люди показали более широкий спектр творческого потенциала, что, возможно, связано с различиями в исполнительных функциях и когнитивных процессах.

Традиционно креативность рассматривалась как отличительная черта человека, коренящаяся в сложных когнитивных процессах, таких как воображение, проницательность и способность связывать, казалось бы, несвязанные понятия. Однако по мере искусственного интеллекта становится все болееdent что машины обладают способностью создавать творческие результаты, которые соперничают, а порой и превосходят достижения человека.

Автор исследования Симоне Грассини, доцент Бергенского университета, подчеркнул преобразующий характер нынешней эры в области искусственного интеллекта и машинного интеллекта. Он отметил необходимость продолжения исследований того, как люди воспринимают машины и в какой степени машины могут имитировать человеческие способности.

Оценка креативности с помощью задания на альтернативное использование

Исследователи провели свое исследование, используя задание на альтернативное использование предметов (Alternate Uses Task, AUT), широко признанный тест на креативность. В этом задании как участникам-людям, так и чат-ботам с искусственным интеллектом было предложено придумать уникальные и креативные способы использования обычных предметов, таких как веревка, коробка, карандаш и свеча. Участникам-людям давалось 30 секунд на то, чтобы придумать как можно больше креативных идей, в то время как чат-ботам было предписано сгенерировать определенное количество идей, используя только 1-3 слова в каждом ответе. Каждый чат-бот проходил тестирование 11 раз.

В исследовании участвовали три чат-бота с искусственным интеллектом: ChatGPT3, ChatGPT4 и Copy.Ai, а также группа из 256 участников-людей, набранных на онлайн-платформе Prolific. Средний возраст участников, носителей английского языка, составлял 30,4 года, с диапазоном от 19 до 40 лет.

Два подхода к оценке креативности

Исследователи использовали два различных подхода для оценки креативности как у людей, так и у чат-ботов с искусственным интеллектом. Оценка семантического расстояния: этот автоматизированный метод измерял оригинальность ответов, оценивая, насколько они отличаются от обычного или ожидаемого использования объектов.

Субъективная оценка креативности: шесть экспертов, не знавших, какие ответы были сгенерированы ИИ, оценили креативность идей по 5-балльной шкале.

Чат-боты с искусственным интеллектом превосходно справляются с оценкой креативности

Результаты исследования показали, что чат-боты с искусственным интеллектом, в частности ChatGPT3 и ChatGPT4, неизменно демонстрировали более высокие показатели семантической дистанции по сравнению с людьми. Это указывает на то, что они давали более оригинальные и менее традиционные ответы, чем участники-люди. Кроме того, эксперты-люди оценили чат-боты с искусственным интеллектом, особенно ChatGPT4, как более креативные в среднем, чем участники-люди.

Однако важно отметить, что, хотя чат-боты с искусственным интеллектом показали исключительно хорошие результаты, они не всегда превосходили самых креативных участников-людей. В некоторых случаях высококреативные участники-люди смогли конкурировать с ИИ в генерации оригинальных и нестандартных ответов.

Грассини подчеркнул важность того, чтобы не переоценивать последствия успеха ИИ в этой конкретной задаче, связанной с творчеством, для сложных реальных профессий, требующих креативности. Он представил себе будущее, в котором чат-боты на основе ИИ будут помогать людям в их творческой работе, а не заменять их полностью.

Среди чат-ботов с искусственным интеллектом ChatGPT4 выделялся как наиболее креативный, если учитывать субъективные оценки. Хотя он не всегда превосходил другие модели ИИ при оценке с помощью алгоритма измерения семантического расстояния, он неизменно получал более высокие оценки креативности от экспертов-людей.

Ограничения и перспективы на будущее

Результаты исследования ограничены одним типом творческого поведения и могут быть неприменимы к творчеству как сложному явлению. Более того, сравнение творческого процесса на уровне отдельных этапов между людьми и чат-ботами остается сложной задачей из-за непрозрачности внутренних процессов чат-ботов.

Грассини отметил, что чат-боты могут проявлять креативность не так, как люди, потенциально полагаясь на заученные ответы, а не на способность генерировать креативные идеи. Учитывая архитектуру этих моделей, полностью понять их творческие процессы по-прежнему невозможно.