ChatGPT резко «отупел». После недавнего обновления языковая модель GPT-4

Если ещё в марте модель GPT-4 давала правильный ответ в 97,6% случаев, то в июне показатель упал… до 2,4%! То есть почти никогда чат-бот не мог правильно ответить на вопрос. В случае GPT-3.5 показатель, напротив, вырос с 7,4% до 86,8%.

Также правильность написания кода упала. Учёные создали набор данных с 50 простыми задачами из LeetCode и измерили, сколько ответов GPT-4 выполнялись без каких-либо изменений. Мартовская версия успешно справилась с 52% проблем, но при использовании июньской модели этот показатель упал до 10%.

К слову, на снижение «умственных способностей» ChatGPT в последние недели жалуются и пользователи. При этом пока неясно, почему так произошло и предпримет ли что-то компания OpenAI.

Скачать книгу «ChatGPT резко «отупел». После недавнего обновления языковая модель GPT-4 — Железня на DTF» fb2