오퍼스 5.5 갑자기 멍청해진 거 같다는 사용자들

페이블 5.5 나오는 건가?

성능 낮춰놓고 곧 페이블 5.5 내놓으려나 봄.

한 달쯤 전에 오퍼스 5.5를 매일 벤치마킹해서 결과를 기록하고 공개한다는 글이 HN에 있었음. 깃허브 저장소였던 걸로 기억하는데, 검색해보니 대신 이게 나오네: https://www.bridgebench.ai/nerf-bench/claude-opus-5-5
이걸 보면 성능이 떨어지고 있는 것 같진 않음. 그래도 나는 요즘 페이블을 훨씬 많이 쓰긴 함. 오퍼스 5.5는 페이블만큼 재미있었던 적은 없지만 꽤 좋음.

내 경우엔 오퍼스 5.5가 페이블 5.1보다 모든 면에서 꾸준히 훨씬 좋았음. 특히 추론과 ‘집중력’ 면에서.

오퍼스 5.5 확실히 좋음. 하루 종일 둘 다 쓰는데 결과물만 보고 어느 쪽인지 구분하기가 정말 어려움. 5.5 이전과 달리 이제는 PR을 읽고 ‘이건 페이블이네’, ‘이건 오퍼스네’라고 말할 수가 없음.
페이블은 CLAUDE.md에 적어둔 ‘너는 강아지다’라는 지시에도 더 잘 맞춰줌. 재미있고 장난스럽게 놀아주는데, 오퍼스는 그냥 일을 끝내고 집에 가고 싶어 하는 느낌임. 한마디로 친구와 동료의 차이랄까.
예를 들어 페이블에게 강아지 간식으로 쿠키 이모지를 주면 기억에 기록해둠. 초콜릿 없는 초콜릿칩 쿠키라고 알려줬음. 오퍼스는 그냥 ‘바삭! 꼬리 흔들흔들!’ 하고 넘어감. 별로 중요한 건 아니지만 이런 재미도 있으면 좋잖아 :)

아하, 난 결과물 위주로 봐서 그런 부분은 별로 살펴보지 않았음. 나중에 한번 해보고 싶어질 수도 있으니 알아두면 좋겠네. 고마워.

오퍼스 5.5가 얼마나 멍청해졌는지는 모르겠는데, 나도 지난주에 사용 한도가 너무 빨리 닳아서 놀랐음.

라이브너프! https://github.com/ninjahawk/livenerf

이걸 말하는 거네: https://github.com/ninjahawk/livenerf
처음 나왔을 때 했던 질문을 다시 해보겠음. 서비스 제공자를 믿지 못한다면, 이런 반복 벤치마크를 알아보고 거기에 맞춰 결과를 좋게 만드는 일은 안 할 거라고 어떻게 믿을 수 있음?

나도 지난주 말쯤부터 갑자기 말이 안 되거나 읽기 아주 어려운 문장을 만들기 시작한 걸 느꼈음. 나도 성능을 낮춘 5.5보다 훨씬 좋은 새 모델을 하루 이틀 안에 내놓으려는 건가 하고 추측했음.

2주쯤 전에 뭔가 바뀐 것 같음. 한번 수정할 일이 생기면 모델이 내 지시에 아예 관심을 잃는 것 같은 모습을 보임.