모델은 진화하는데 우리의 에이전트 성능이 낮게 느껴지는 경험을 해보신 적이 있으실까요? 개발자라면 더 크게 와닿겠지만, 사실 AI 도구를 쓰는 누구에게나 해당되는 이야기입니다. 최근에 AIE 채널에서 엔트로픽 AI팀의 발표가 있었는데요. Claude managed Agents의 역할과 활용법이었습니다. 위 내용을 정리해봤습니다.

하네스는 모델보다 더 빨리 구식이 됩니다

먼저 하네스는 모델이 안정적으로 잘 운영될수 있도록 하는 실행환경과 제어 구조 전체를 이야기합니다. 우리가 매일 쓰는 AI 기능이 굼뜨거나 엉뚱하게 답할 때, 문제는 모델이 아니라 이 하네스가 낡아서일 수 있습니다.

모델마다 특징이 다릅니다. 그래서 모델 변화에 따라 조금씩 하네스 수정이 필요한데, 대부분 관리하지 않습니다.(저 포함😵‍💫) 기존의 설정값 그대로 모델을 돌리니 제 성능이 발휘되지 않습니다. 이번 Opus 5 퍼포먼스에 대해 스레드에서도 논란(?)이 많은데, Opus 5만의 특징을 잘 활용하지 못해 일어난 현상이 아닐까 싶네요. 문제는 이 관리가 만만치 않다는 겁니다. 새 모델이 나올 때마다 하네스를 뜯어고치다 보면 관리 리소스가 너무 많이 듭니다.