OpenAI ответила на жалобы на то, что GPT-4 ChatGPT становится «ленивее». Компания AI ответила на Икс говоря: «Мы слышали все ваши отзывы о том, что GPT4 становится более ленивым! Мы не обновляли модель с 11 ноября, и это, конечно, не намеренно. Поведение модели может быть непредсказуемым, и мы пытаемся это исправить».
Короче говоря, OpenAI заявляет, что в последнее время они не вносили никаких изменений в ChatGPT или GPT-4, которые сделали бы его более ленивым. Фактически с 11 ноября никаких изменений не произошло. Но они объяснили, что сама модель «может быть непредсказуемой», и именно это они пытаются исправить.
OpenAI добавил: «Чтобы внести ясность, идея не в том, что модель каким-то образом изменилась с 11 ноября. Просто различия в поведении модели могут быть незначительными — может ухудшиться только подмножество подсказок, и это может занять много времени». клиентам и сотрудникам пора заметить и исправить эти закономерности».
Вот эти посты:
мы услышали все ваши отзывы о том, что GPT4 становится более ленивым! мы не обновляли модель с 11 ноября, и это явно не намеренно. поведение модели может быть непредсказуемым, и мы пытаемся это исправить ?
— ЧатGPT (@ChatGPTapp) 8 декабря 2023 г.
Чтобы внести ясность, идея не в том, что модель каким-то образом изменилась с 11 ноября. просто различия в поведении модели могут быть незначительными — может ухудшиться только подмножество подсказок, и клиентам и сотрудникам может потребоваться много времени, чтобы заметить и исправить эти закономерности.
— ЧатGPT (@ChatGPTapp) 8 декабря 2023 г.
Между тем, на выходных они также опубликовали следующее:
При выпуске новой модели мы проводим тщательное тестирование как по оффлайн-метрикам оценки, так и по онлайн-A/B-тестам. после получения всех этих результатов мы пытаемся принять решение на основе данных о том, является ли новая модель улучшением по сравнению с предыдущей для реальных пользователей.
— ЧатGPT (@ChatGPTapp) 9 декабря 2023 г.
мы всегда стремимся сделать наши модели более функциональными и полезными для всех в миллионах случаев использования. поэтому, пожалуйста, продолжайте оставлять отзывы! это помогает нам справиться с проблемой динамической оценки ?
— ЧатGPT (@ChatGPTapp) 9 декабря 2023 г.
Обсуждение на форуме Икс.