Вышел Fable 5 - и я опять жду, что Opus поглупеет
В Claude Code выкатили новую модель - Fable 5. Она в два раза дороже Opus.
Моя первая мысль была не "насколько он хорош". Она была такая: "ну вот, значит, Opus сейчас опять станет тупее". Звучит как паранойя, но я погонял обе модели на реальном продакшен-проекте, и накопил некоторые наблюдения. Делюсь без хайпа - только то, что видел сам на живых задачах.
Запустил обе модели на одной задаче
Я дал Opus и Fable одну и ту же задачу на боевом проекте, по очереди. Скажу честно сразу: ни одна из них не довела дело до конца сама. Обеим нужен был я рядом, чтобы доводить мелочи до рабочего состояния.
Так что это не статья в духе "новая модель меняет всё". Не меняет. Но способ, которым они ошибаются, отличается - и вот это интересно.
Где Opus накосячил, а Fable - нет
Opus полез создавать лишние подписки на события. Навесил обработчики, которые уже были в коде. Дубли, которые потом кто-то должен вычищать руками.
Fable повёл себя ровно наоборот. Сначала пошёл искать, нашёл уже существующие подписки и встроился в них. И не спросил у меня ни одного разрешения - просто сделал. Opus же дёргал меня почти на каждый шаг: "можно я сделаю это? а это?".
Одна модель экономит моё внимание, другая его съедает.
Opus деградирует примерно с марта
Дальше то, что не даёт мне покоя. На этом же проекте Opus с марта работает всё хуже. Глобально я ничего не менял - тот же код, та же структура, те же задачи.
Но версии 4.7, а потом 4.8 будто начали проскакивать мимо. Пропускают вещи. Забывают контекст, который был три сообщения назад. Делают небрежные ошибки, которых раньше не было.
Самое неприятное - это происходит незаметно. Никто не присылает уведомление "модель стала слабее". Ты просто в какой-то момент ловишь себя на том, что перепроверяешь за ней то, что раньше доверял без вопросов.
Fable 5 напомнил мне декабрьский Opus
А вот Fable 5 по ощущениям - это Opus, которым я пользовался в декабре. Тот самый, ранний. Пишет код, держит нить разговора, не теряет логику на середине задачи.
Закрыть задачу полностью сам он по-прежнему не может. Но ощущение остроты вернулось. И, судя по разговорам с другими разработчиками, дело не только во мне - люди замечают тот же дрейф.
Так это паранойя или закономерность?
И вот мой главный вопрос. Каждый раз, когда выходит новая блестящая модель, старая будто незаметно тупеет - ровно настолько, чтобы захотелось перейти на новую и платить в два раза больше.
Я не утверждаю, что это делается специально. Может, я цепляюсь за эффект первого впечатления. Может, модели реально меняются между версиями, и накопленный контекст длинных проектов вылезает первым.
Но осадок остаётся.
А вы замечали, что Opus стал слабее за последние месяцы? Или это проявляется только на долгих проектах с большим накопленным контекстом? Поделитесь в комментариях - мне правда интересно, это общая картина или мой отдельный случай.