Claude 3.5 ‘컴퓨터 사용’ 기능 소개: 화면 보고 클릭하고 타이핑까지 한다

Claude 3.5 이번 업데이트에서 가장 눈에 띄는 변화는 ‘잘 대화하는 AI’에서 ‘직접 작업을 수행하는 AI’로 한 단계 더 나아갔다는 점입니다. 공개 테스트(베타)에서는 Claude 3.5가 화면 내용을 확인하고, 커서를 이동해 버튼을 클릭하며, 입력창에 타이핑까지 해 단계형 작업을 진행할 수 있습니다. 아래에서는 편집자 관점에서 Claude 3.5의 변화 포인트를 정리해, 지금 바로 써볼 만한지 판단할 수 있도록 돕겠습니다.

Claude 3.5新增“计算机使用”，能做什么

‘컴퓨터 사용(Computer Use)’이란, 사용자가 Claude 3.5에 목표를 주면 사람이 UI를 따라 하듯 화면을 보고 다음 행동을 결정해 실행하는 기능을 말합니다. 즉, 먼저 화면을 확인한 뒤 어디를 클릭할지, 무엇을 입력할지를 판단해 순서대로 수행합니다. 웹 관리자 페이지에서 항목을 하나씩 입력하거나, A 페이지의 정보를 정리해 B 폼에 옮겨 적는 등 조작 단계가 많은 업무에 적합합니다. 다만 공식적으로도 아직 실험적 기능이라고 밝히고 있으며, Claude 3.5가 가끔 잘못 클릭하거나 단계를 누락할 수 있어 사용자가 수시로 확인하고 교정(개입)할 필요가 있습니다.

上线形态：API可用，支持多平台调用

현재 Claude 3.5의 컴퓨터 사용 기능은 API 공개 베타 형태로 제공되며, 개발자는 Anthropic API에서 바로 구축할 수 있습니다. 동시에 Claude 3.5는 Amazon Bedrock과 Google Cloud의 Vertex AI에서도 사용할 수 있어, 기업이 기존 클라우드 아키텍처에 맞춰 연동하기에 유리합니다. 팀 관점에서는 Claude 3.5가 단순한 데모 수준을 넘어, 실제 업무 프로세스/시스템에 넣어 자동화에 활용할 수 있는 유형의 기능이라는 의미입니다.

模型更新点：Sonnet升级与Haiku补位

이번에는 업그레이드된 Claude 3.5 Sonnet(일부 AWS 환경에서는 Sonnet V2로 표기) 중심으로, 코딩과 도구 사용 성능이 강화됐으며 비용과 속도는 비슷한 수준을 유지합니다. 또 다른 라인업인 Claude 3.5 Haiku는 더 빠른 응답과 낮은 지연 시간을 내세워, 사용자-facing 제품이나 분리된 서브 태스크에 적합합니다. 선택 기준으로는 복잡한 실행을 더 안정적으로 처리하려면 Claude 3.5 Sonnet을 우선 고려하고, 속도와 처리량(throughput)이 중요하다면 Claude 3.5 Haiku를 검토하는 편이 좋습니다.

安全与使用建议：先从可控场景开始

Anthropic에 따르면 새 Claude 3.5는 배포 전 엄격한 안전 평가를 거쳤고, 미국·영국의 AI 안전 연구기관과 협력해 테스트했으며, ASL-2 기준을 계속 적용합니다. 실제 적용 시에는 Claude 3.5를 먼저 ‘되돌릴 수 있는(rollback 가능한)’ 작업에 배치하는 것이 권장됩니다. 예를 들어 읽기 전용 탐색, 초안 입력, 단계 제안처럼 통제 가능한 업무부터 시작하고, 결제 실행·데이터 삭제·권한 변경 같은 고위험 작업을 바로 맡기지는 않는 편이 좋습니다. 중요한 단계 직전에 검수 지점을 넣어두면, Claude 3.5의 컴퓨터 사용 기능이 시간을 줄이면서도 통제력을 유지하는 데 도움이 됩니다.