ChatGPT стал хуже отвечать на вопросы: ученые назвали причину

Есть повод задуматься над доверием к боту.
Иллюстративное изображение / Getty Images

Исследователи из Стендфорда изучили эволюцию чат-бота ChatGPT. Выводы неутешительные. ИИ стал глупее за последние несколько месяцев. Об этом свидетельствуют результаты тестов, сообщает arxiv.org.

Читай также: Искусственный интеллект ChatGPT дал интервью techno.bigmir.net: ответы и инструкция к пользованию

Ученые решили провести указанную работу после жалоб пользователей на форуме OpenAI. Им не нравились ответы модели ChatGPT-4 и чат-бота Bing от Microsoft, работающего на ней же. Для оценки качества ChatGPT заставили решать математические задачи, отвечать на деликатные и опасные вопросы, просили генерировать код и показать визуальное мышление.

В мартовской версии ИИ с точностью до 97,6% определял простые числа. В июньском обновлении показатель составил 2,4%. GPT-3.5 за июнь был лучше за GPT-3.5 за март. Выходит, что разработчики делают обновление своего продукта на худшем уровне.

В качестве причины ситуации ученые подозревают, что разработчики пустились в режим экономии для функционирования ChatGPT. Его обслуживание по некоторым данным в сутки затягивает до 700 тыс долл. Потому нейросеть настраивается так, чтобы ответы были того же качества, но с меньшими затраченными ресурсами. Качество скатилось, а экономия вылезла боком. Потому ChatGPT стал "дешевле".

Напомним, ранее мы писали о том, что искусственному интеллекту пророчат крах. 

Читай также: Искусственный интеллект Google Bard дал интервью techno.bigmir.net: ответы и инструкция к пользованию

Подпишись на наш Telegram-канал, если хочешь первым узнавать главные новости.