GPT-чат провалил тест на обладание искусственным интеллектом

Новое исследование, проведенное учеными Калифорнийского университета, подтверждает, что искусственный интеллект (ИИ) в виде модели ChatGPT все еще не достигает уровня, позволяющего ему успешно пройти тест Тьюринга.

Тест Тьюринга

Этот тест был разработан математиком Аланом Тьюрингом 70 лет назад и предназначен для определения, способна ли машина имитировать разговорную речь и достичь уровня человеческого интеллекта. Вариаций теста существует множество, суть же его в том, что человек общается либо с другим человеком, либо с ИИ и должен на основании этого общения определить — с кем именно он разговаривает. За все время существования теста Тьюринга пройти его не смог ни один искусственный интеллект.

Не удалось обмануть

Исследование, проведенное Кэмероном Джонсом и Бенджамином Бергеном, включало 650 участников, которые участвовали в беседах друг с другом или с моделью GPT. Затем участникам предлагалось определить, с кем они разговаривали — с другим человеком или с ИИ. Результаты исследования показали, что модель GPT-4 обманула участников в 41% случаев, в то время как предыдущую версию GPT-3.5 принимали за человека только 5-14% испытуемых. Таким образом, людям удалось распознать ИИ более чем в половине испытаний.

Эти результаты говорят о том, что модель GPT-4 все еще не способна генерировать тексты, неотличимые от тех, что созданы человеком. Однако, важно отметить, что во многих случаях чат-боты уже могут общаться достаточно убедительно, чтобы обмануть пользователей.