OpenAI подтвердила в треде в X (Twitter), что получает жалобы от некоторых пользователей. Они утверждают, что в последнее время при использовании GPT-4 или ChatGPT API чат-бот либо отказывается отвечать на вопросы, либо прерывает разговор.
По данным The Independent, вышеуказанные проблемы обычно проявляются, если пользователь вводит фрагмент кода. В ответ GPT-4 может предоставить только некоторую информацию по нему, а затем предлагает выполнить оставшиеся задания самостоятельно. Иногда ИИ просто пишет: «Вы можете сделать это сами».
В OpenAI подтвердили, что GPT-4 «ленится». По мнению представителей компании, оно проявилось уже после обновлений, представленных 11 ноября. Это означает, что поведение чат-бота не является следствием каких-то изменений, внесённых разработчиками, а сформировалось само по себе. Компания отмечает, что «поведение модели может быть непредсказуемым, и это пытаются исправить».
Однако пользователи указывают на более широкий спектр проблем, в том числе на ошибочные ответы, которые чат-бот выдаёт даже на простые вопросы — как на картинке выше. Ещё летом они сообщали, что GPT-4 выдаёт нелогичные ответы, большее число ошибок, не хочет работать с предоставленным ранее контекстом, игнорирует инструкции и запоминает только самую последнюю подсказку.
Это подтвердило исследование из Стэнфордского университета, которое демонстрирует, что модель стала хуже справляться с задачами генерации кода.
Сама OpenAI оценивала отзывы пользователей при использовании GPT-3.5 и GPT-4, и это исследование показало, что 70% из них предпочитают ответы последней версии.
Автор: maybe_elf
