WSJ: ученые объяснили, почему ChatGPT резко поглупел

По словам специалистов, чат-бот деградирует из-за феномена "дрейфа", который отмечается, когда попытка усовершенствовать одну часть модели искусственного интеллекта приводит к тому, что ухудшается работа других ее областей.

Ученые изучили две версии GPT: 3.5 и 4.0. Чат-бот должен был решить задачу, является ли определенное число простым. В основе теста была выборка из тысячи чисел.

Результаты теста показали, что GPT-4 показал деградацию в шести задачах из восьми, а GPT-3.5 показал прогресс по шести задачам. Еще в марте четвертая версия чат-бота давала верные ответы в 84% случаев, в июне доля правильных ответов сократилась до 51%.

Чат-бот не смог справиться и с тестом, где необходимо было ответить на 1500 вопросов. В марте GPT-4 давал верные ответы на 98% вопросов, сейчас - только на 23%.

Авторы исследования отмечают, что данный эксперимент должен продемонстрировать нелинейность развития ИИ.

Ранее involta.media сообщала, что ученые развеяли миф о том, что охота была чисто мужским занятием.