Искусственный интеллект завалил вступительный экзамен в МФТИ

В свете все чаще звучащих предположении и опасений, что искусственный интеллект (ИИ) вскоре сможет заменить и вытеснить человека во многих сферах деятельности, эксперимент в Московском физико-техническом институте (МФТИ) кажется весьма наглядным.

Экзамен для Chat GPT

Сотрудники вуза решили проверить, сможет ли нейросеть Chat GPT-4 Turbo поступить в МФТИ. Нейросети были предложены задачи по механике, оптике, термодинамике, электричеству и кинематике. Проходной балл был установлен на уровне 85 баллов, что довольно высоко, но не предел для столь престижного учебного заведения — на ключевых направлениях этот показатель достигал и 95 баллов.

Она не понимает

Простые задачи нейросеть решила, но с более сложными не справилась. Она допускала ошибки в расчетах, путалась в терминах и формулировках, а иногда делала нелогичные выводы. «Одно дело выдать правильный ответ на задачу, а другое дело — понимать глубинно физику. Ощущение понимания есть, но оно иллюзорно», - прокомментировал результат главный аналитик Центра искусственного интеллекта МФТИ Игорь Пивоваров.

Поступить, куда попроще

Точный балл, который получила нейросеть, сотрудники МФТИ не назвали. Судя по косвенным показателям, это что-то между тройкой и четверкой. В МФТИ с таким баллом, конечно, не поступишь, но этого может оказаться вполне достаточно для поступления в вуз с более низким проходным порогом.

Нейросеть — троечница

Стоит отметить, что подобные эксперименты проводились и ранее. Так, Chat GPT-4 Turbo получила тройку по литературе на ЕГЭ, не справившись с творческим заданием. В Уральском федеральном университете нейросеть получила тройку по истории. Она хорошо отвечала на вопросы с однозначными ответами, но испытывала трудности с заданиями, требующими рассуждений.

Кстати, нейросеть Chat GPT успешно применяется для выявления нарушителей на ЕГЭ. В 2023 году она правильно идентифицировала более 200 случаев списывания.