SOL 6가 문제가 좀 있네요
몇시간 전 SOL 6 출시 후 벤치마크 데이터는 있었지만, 코딩 능력에 대한 정보는 없더군요. 5.6에서 6으로 바꿨다가 지옥이 펼쳐졌습니다.
- 대화 히스토리를 다른 프로젝트의 히스토리와 뒤섞어 버립니다. 사이드 프로젝트 진행중이었는데, 메인 프로젝트 폴더에 들어가서 수정하고 있더군요. 폴더도 다르고 프로젝트 간 경계도 에이전트 파일로 구분해 뒀는데, 어떻게 이런 일이 생긴건지... 로컬 커밋만 하고 있었는데 커밋까지 날려버려서 복구가 불가능한 상태 ㅠㅠ
- 다른 프로젝트에서는 지시하지도 않은 파일들까지 수정해 놓고는 “개선했다”고 보고합니다. 왜 수정했는지 물으니 경험에 따른 판단이었다고 하네요. 그래서 전후 실측 결과가 좋아졌는지 물었더니, 오히려 더 나빠졌다고 합니다. 요청하지 않은 수정까지 해 놓고 결과마저 나빠졌다는 보고를 받으니 어이가 없더군요.
SOL 6이 멍청하다는 이야기는 들었는데 토큰 값 아끼려고 SOL 6으로 전환하는건 아직 무리인듯 합니다.
총 3명이 반응했습니다
|
댓글을 작성하시려면 로그인이 필요합니다.
댓글 6개
덩달아 아스트라도 느려지고 고자가 된 느낌이에요. 아마 조만간 엄청난 놈이 나올거 같습니다.
5.6 SOL이나 아스트라로 밀고 나가면 되는데 코딩에는 새로나온거 꼭 확인해보고 싶어지잖아요.
아스트라로 시작해서 서브에이전트까지 붙여서 리뷰까지 완료한 프로젝트라고 해도
새 모델에서 문제점을 찾아내지 않을까, 이 코드가 과연 무결성일까 궁금하기도 하구요.
지금은 오푸스 5.5 입니다.
코덱스나 클로드나 신모델 나오고 2주동안은 성능이 엄청 좋고 그 후에는 다운되니 그때는 코덱스로 넘어가심 되구요.