클로드 코드 CLI에서도 화면을 보고 수정합니다

클로드 코드 CLI에서도 화면을 보고 수정합니다

클로드 코드에 Computer Use가 추가됐습니다. macOS 환경에서 클로드가 앱을 직접 실행하고 테스트하고 버그도 잡습니다. 그리고 이모든 것을 터미널을 벗어나지 않아도 됩니다. 개인적으로 불편했던 부분이라 이 업데이트 매우 칭찬합니다👏👏

———

✅ 빌드하고, 실행하고, 확인까지 한 번에
“MenuBar 앱 만들고, 실행해서 각 탭 클릭해보고 오류 스크린샷 찍어줘”라고 하면 클로드가 컴파일부터 UI 클릭 검증까지 한 세션에서 처리합니다. 코드를 짜고 사람이 실행해보고 결과를 다시 설명해주던 왕복 작업이 없어집니다.


✅ 화면을 보면서 UI를 테스트합니다
기존 UI 테스트 자동화는 버튼 하나하나 클릭 동작을 코드로 직접 짜야 했습니다. 클로드 코드에게 그냥 말로 하면 됩니다. “온보딩 플로우 테스트해줘”라고 하면 앱을 직접 열고, 실제 화면을 보면서 버튼을 클릭하고, 각 화면을 스크린샷으로 남깁니다. 사람이 QA하는 것과 가장 가까운 방식이죠 😱


✅ CLI가 없는 앱도 제어가 됩니다
대부분의 앱은 터미널 명령어나 API가 없습니다. 피그마, 하드웨어 드라이버, 회사 내부 전용 툴 같은 것들이요. 기존 클로드 코드는 이런 앱에 손을 댈 수가 없었는데, 이제는 화면을 보고 마우스로 클릭하는 방식으로 이런 앱도 다룰 수 있다고 합니다.


✅ 화면에서 직접 버그를 잡습니다
“좁은 창에서 모달이 잘린다”고 하면 클로드가 창을 직접 줄여서 버그를 재현하고, 문제가 되는 부분을 수정해서 화면을 다시 확인합니다. 버그를 설명하고 클로드가 코드 수정하고 다시 확인하던 왕복 작업이 없어졌습니다.

———

CLI 환경에서 제품을 만들고 결과를 테스트하고 수정하는 과정은 개발자에게도 반복적이고 번거로운 작업이었습니다. 그렇기 때문에 비개발자는 더 어렵죠. 화면을 보고 직접 수정까지 할 수 있는 환경이 되면서 그 부담이 조금씩 줄어드는 것 같네요 👾