Последнее время моя команда плотно работает с Kimi K3. С выходом нового GLM мы снова включили его в стек.
И в какой-то момент у нас внутри возникла одна и та же мысль: когда возвращаешься к пятому Opus, кажется, что он отупел.
Слово, конечно, неточное. Opus не разучился писать код, разбирать документы или решать сложные задачи. Но в рабочем диалоге он всё чаще ощущается как очень старательный полуисполнительный мальчик-болванчик.
Ты дал поручение, он его выполнил. Иногда хорошо. Но отдельно приходится просить посмотреть шире, заметить дырку в постановке, удержать неявный контекст, возразить, если ты сам идёшь не туда.
Во времена Opus 4.6 на фоне остальных он казался почти гениальным именно в этом. Не потому, что всегда выдавал правильный ответ. Он чаще подхватывал мысль на полуслове и приносил то, чего ты даже не успел сформулировать в задаче.
Сейчас он стал аккуратнее, буквальнее, безопаснее. Как будто в нём прибавили хорошего менеджера по исполнению и убавили партнера, с которым можно вместе думать.
Возможно, это просто контраст после Kimi и GLM. Возможно, я привык к моделям, которые чаще лезут со своим мнением, иногда даже не туда. Но вот что важно: в ежедневной работе "ум" модели измеряется не только тем, может ли она решить задачу.
Ум, это когда она видит, что задача поставлена криво. Когда держит нить контекста. Когда не ждёт идеальной формулировки, а помогает добраться до сути.
У вас Opus тоже стал ощущаться иначе?
И в какой-то момент у нас внутри возникла одна и та же мысль: когда возвращаешься к пятому Opus, кажется, что он отупел.
Слово, конечно, неточное. Opus не разучился писать код, разбирать документы или решать сложные задачи. Но в рабочем диалоге он всё чаще ощущается как очень старательный полуисполнительный мальчик-болванчик.
Ты дал поручение, он его выполнил. Иногда хорошо. Но отдельно приходится просить посмотреть шире, заметить дырку в постановке, удержать неявный контекст, возразить, если ты сам идёшь не туда.
Во времена Opus 4.6 на фоне остальных он казался почти гениальным именно в этом. Не потому, что всегда выдавал правильный ответ. Он чаще подхватывал мысль на полуслове и приносил то, чего ты даже не успел сформулировать в задаче.
Сейчас он стал аккуратнее, буквальнее, безопаснее. Как будто в нём прибавили хорошего менеджера по исполнению и убавили партнера, с которым можно вместе думать.
Возможно, это просто контраст после Kimi и GLM. Возможно, я привык к моделям, которые чаще лезут со своим мнением, иногда даже не туда. Но вот что важно: в ежедневной работе "ум" модели измеряется не только тем, может ли она решить задачу.
Ум, это когда она видит, что задача поставлена криво. Когда держит нить контекста. Когда не ждёт идеальной формулировки, а помогает добраться до сути.
У вас Opus тоже стал ощущаться иначе?