Четвертая версия одной из самых популярных нейросетей ChatGPT-4 за последние три месяца стала хуже справляться со своими задачами, выяснили ученые Стэнфордского университета.
Линьджао Чен, Матей Захария и Джеймс Зу изучили производительность последней версии бота GPT-4 и результаты показывают, что ПО, управляющее чат-ботом, на самом деле заметно снизило свою «эффективность».
В период с марта по июнь 2023 года у GPT-4 наблюдалось значительное снижение точности ответов. Например, когда его спросили, является ли 17077 простым числом, точность ChatGPT-4 упала на 95,2%.
Напротив, в GPT-3.5, который поддерживает бесплатную версию ChatGPT, наблюдалось значительное улучшение: точность ответа на тот же вопрос выросла с 7,4% до 86,8%.
Ранее Всемирная организация здравоохранения (ВОЗ) призвала человечество быть осторожными при использовании искусственного интеллекта, в частности чат-бота ChatGPT.
