Как показывает себя искусственный интеллект в тестах на творческое мышление? Результаты американского исследования

Исследователи из Монтаны продемонстрировали, что ChatGPT превосходит большинство людей по способности генерировать большое количество идей и новых решений. Для исследования они использовали тест творческого мышления Торренса (TTCT). Креативный ИИ может создавать инновации нового типа.

Разработчики ИИ очень четко определили свою цель и использовали слово "креативность" в своих первых документах, которые имели целью закрепить предположения о потенциальных достижениях искусственного интеллекта. Они подвергли ИИ стандартным тестам на креативность, в которых он показал лучшие результаты, чем подавляющее большинство студентов, войдя в 1% лучших по уровню оригинальности.

Это может вывести инновационную работу на новый уровень и изменить представление о творчестве. Алгоритмы уже используются, например, при разработке новых лекарств.

"Некоторые удивляются, что искусственный интеллект демонстрирует творческие способности, но если вы вернетесь к его истокам, то увидите, что его основатели открыто заявляли, что их целью было создать симуляцию творческих способностей мышления. Они пытались создать симуляцию интеллекта, а творчество является его частью. Создатели ИИ были очень конкретными в отношении своей цели и использовали слово "творчество" в своих первых документах, чтобы закрепить предположение о потенциальных достижениях искусственного интеллекта", – рассказывает Эрик Гузик из Университета Монтаны в интервью Newseria Innowacje.

Исследователи использовали тест творческого мышления Торренса (TTCT), который уже десятилетиями применяется для изучения творческих способностей человека. Он оценивает креативность с точки зрения нескольких факторов, которые влияют на творческое мышление. К ним относятся свободность (способность продуцировать множество идей), гибкость (способность продуцировать идеи, которые могут решать проблемы различными способами), оригинальность (продуцирование уникальных идей) и тщательность (добавление больше деталей к предложенному решению).

Рекомендуем прочитать: Осторожно: опасные расширения для Chrome могут воровать ваши пароли

"Мы решили, что это будет интересный предмет для исследования, поскольку ChatGPT и GPT-4 очень хорошо выполняют другие тесты, обычно демонстрируя такие черты, как память или широкие знания. Вместе с другими исследователями мы обнаружили, что GPT-4 способен давать творческие ответы на задания. Интересно, что OpenAI распространяет информацию о том, что они считают GPT-4 более креативным, чем GPT-3, что само по себе интересно. Это побудило нас начать это исследование, чтобы узнать о креативности GPT-4 путем измерения скорости, гибкости и оригинальности ответов, которые GPT-4 генерирует в тесте творческого мышления Торренса", – объясняет исследователь.

Исследователи прислали восемь ответов, сгенерированных с помощью ChatGPT (на основе движка GPT-4) и контрольную группу из 24 студентов Университета Монтаны для оценки. Результаты сравнивали с результатами 2700 студентов со всей страны, которые проходили тест TTCT в 2016 году. Оценивание было поручено Scholastic Testing Service (STS), системе, которая не знала, что в исследовании был задействован искусственный интеллект. Важно отметить, что тест TTCT является защищенной собственностью. Учитывая это, ChatGPT не мог получить информацию о тесте в интернете или в публичной базе данных. Анализ STS показал, что ChatGPT показал отличные результаты, попав в верхний процентиль с точки зрения плавности и оригинальности. По гибкости он несколько снизился – до 97-го процентиля.

"Мы знали, что если сможем показать, что искусственный интеллект хорошо справляется с тем, что мы, люди, считаем творчеством, это, вероятно, будет иметь другие последствия. Это может заставить нас переосмыслить, что такое творчество для нас. На наш взгляд, в нем нет ничего магического. Это процесс, в котором мы, как люди, очень хорошо умеем сочетать различные ресурсы и исходную информацию различными способами для удовлетворения конкретных потребностей. Это действительно удивительное умение, но ему можно научиться, его можно развивать и его можно тренировать", – утверждает Эрик Гузик. "Надеюсь, мы сможем увидеть это как один из результатов этого исследования. Если мы можем научить искусственный интеллект быть креативным, несомненно, мы также сможем развить нашу собственную креативность".

По его словам, результаты исследования могут помочь понять, что человек способен улучшить свои навыки творческого мышления и решать проблемы различными способами с помощью разработанных инструментов и искусственного интеллекта. "Чем больше идей мы создаем и чем более разнообразными они будут, чем эффективнее мы сможем решать проблемы различными способами, тем больше инноваций, ориентированных на человека, мы увидим в процессе реализации предприятий. Одним из прямых последствий развития креативности ИИ станет появление нового типа инноваций и, возможно, лучших условий для инноваций, которые когда-либо переживало человечество. Следовательно, это будет влияние на макроуровне. В меньшем масштабе это повлияет на то, как мы выполняем работу, реагируем на потребности, разрабатываем новые продукты, распространяем их и подходим к созданию новых продуктов и услуг на рынке", – прогнозирует Эрик Гузик.

Одной из компаний, которая уже использует творческий потенциал ИИ, является биотехнологический стартап Insilico Medicine. Недавно она стала первой в мире, которая запустила первый препарат, открытый и разработанный генеративным ИИ, в фазу II клинических испытаний с участием пациентов. Продукт может дать надежду пациентам, страдающим идиопатическим легочным фиброзом, приводящим к дыхательной недостаточности.

Рекомендуем прочитать: Сколько нужно работать IT-специалисту, чтобы зарабатывать $5000 в месяц