Claude Computer Use 완전 가이드

AI가 내 맥북을 대신 조작한다 — 설정부터 실전까지, 한 걸음씩

1. Claude Computer Use란 무엇입니까

2026년 3월 24일, Anthropic이 공개한 기능입니다. Claude가 여러분의 Mac 화면을 직접 보고, 마우스를 움직이고, 키보드를 입력하여 앱을 조작합니다. 브라우저만 검색하는 수준이 아닙니다. 디스코드, 카카오톡, Xcode, iOS 시뮬레이터 등 컴퓨터에 설치된 모든 앱에 접근할 수 있습니다.

작동 원리는 이렇습니다. Claude가 화면의 스크린샷을 찍고, 그 이미지를 분석하여 버튼의 정확한 XY 좌표를 계산합니다. 그 좌표로 마우스를 이동시키고, 클릭하고, 텍스트를 입력합니다. 사람이 눈으로 화면을 보고 손으로 마우스를 움직이는 과정을 AI가 그대로 재현하는 것입니다.

Claude는 작업을 수행할 때 우선순위를 따릅니다. Slack, Google Calendar처럼 이미 연동된 앱이 있으면 해당 커넥터를 먼저 사용합니다. 커넥터가 없는 앱이라면, 그때 Computer Use로 전환하여 화면을 직접 제어합니다.

2. 사용 조건 확인

지금 바로 사용할 수 있는 사람과 아직 기다려야 하는 사람이 나뉩니다. 아래 조건을 하나씩 확인하십시오.

3. 설치: Claude Desktop 앱 다운로드

이미 Claude Desktop 앱이 설치되어 있더라도, 이번 기능을 사용하려면 최신 버전으로 업데이트해야 합니다. 처음 설치하는 분은 아래 순서를 따르십시오.

Step 1. 웹 브라우저에서 claude.com/download 에 접속합니다.

Step 2. macOS용 다운로드 버튼을 클릭합니다. Intel과 Apple Silicon(M 시리즈) 통합 빌드가 제공됩니다.

Step 3. 다운로드된 .dmg 파일을 열고, Claude 앱 아이콘을 Applications 폴더로 드래그합니다.

Step 4. Applications 폴더에서 Claude를 실행하고, Anthropic 계정으로 로그인합니다.

이미 설치된 분은 상단 메뉴바의 Claude 메뉴 → "Check for Updates..."를 클릭하여 최신 버전으로 업데이트하십시오. 업데이트 후에도 Computer Use 옵션이 보이지 않으면, 앱을 삭제하고 새로 설치한 뒤 로그아웃 → 재로그인을 시도하십시오.

4. 활성화: Computer Use 켜기 (핵심 설정)

앱을 설치했다고 바로 작동하지 않습니다. Computer Use는 기본적으로 꺼져 있으며, 직접 켜야 합니다. macOS 시스템 권한도 부여해야 합니다.

Step 1. Claude Desktop 앱을 엽니다.

Step 2. 왼쪽 하단의 설정(Settings) 아이콘(톱니바퀴 모양)을 클릭합니다.

Step 3. 설정 창에서 왼쪽 메뉴의 "Desktop app" 아래 "General"을 클릭합니다.

Step 4. 새로 생긴 "Computers" 항목을 찾습니다. 토글 스위치를 켭니다(ON).

Step 5. 바로 아래에 두 개의 macOS 권한이 표시됩니다. 이 두 가지를 모두 허용해야 합니다.

각 권한 옆의 버튼을 누르면 Mac의 시스템 설정(System Settings)으로 이동합니다. 시스템 설정 → 개인정보 보호 및 보안(Privacy & Security) → 해당 항목에서 Claude 앱을 추가하고 활성화하십시오. 두 권한을 모두 부여하면, 설정 화면에 "Granted"로 표시됩니다.

5. 실행: Cowork 또는 Code 탭에서 명령하기

설정이 끝났으면 실제로 사용해 볼 차례입니다. Claude Desktop 앱의 상단에 Chat, Cowork, Code 세 개의 탭이 있습니다. Computer Use는 Cowork 탭과 Code 탭에서 작동합니다.

Step 1. Cowork 탭을 클릭합니다. (개발자라면 Code 탭을 선택합니다.)

Step 2. 채팅창에 원하는 작업을 자연어로 입력합니다.

Step 3. Claude가 해당 앱에 접근하기 전에 "Allow"(허용) 버튼이 뜹니다. 이것을 눌러주면 작업이 시작됩니다.

화면 상단에 "Claude is using your computer"라는 알림이 나타나면, Claude가 화면을 보고 마우스와 키보드를 제어하고 있다는 의미입니다. 이 동안 마우스를 만지지 않는 것이 좋습니다. Claude의 좌표 계산이 어긋날 수 있기 때문입니다.

6. 실전 예시: 이런 일을 시킬 수 있습니다

Computer Use가 구체적으로 어떤 일을 할 수 있는지, 실제 시연 사례를 통해 살펴보겠습니다.

7. Dispatch: 핸드폰에서 맥을 원격 조종하기

Dispatch는 Computer Use와 별개로 출시된 기능이지만, 이 둘을 결합하면 진정한 원격 작업이 가능해집니다. iPhone이나 Android의 Claude 앱에서 작업을 지시하면, Mac에서 Claude가 화면을 직접 조작합니다.

Step 1. iPhone/Android에서 Claude 앱을 설치합니다. (App Store 또는 Google Play)

Step 2. Mac의 Claude Desktop이 실행 중이어야 합니다.

Step 3. 핸드폰에서 Dispatch를 통해 작업을 지시합니다.

Step 4. Mac 쪽에서 "Allow Once" 권한 허용이 필요합니다. 이 부분은 현재 원격으로 처리할 수 없으므로, 첫 세션에서 한 번 허용해두어야 합니다.

외출 중에 Mac이 꺼지지 않게 하려면, macOS 시스템 설정 → 디스플레이 → "잠자기 방지(Prevent Sleep)" 또는 터미널에서 caffeinate 명령어를 사용하십시오. Mac이 깨어 있어야 Dispatch가 작동합니다.

8. 알아두어야 할 한계와 주의사항

● macOS 전용 — Windows, Linux는 현재 미지원. Anthropic이 Windows 지원을 예고했지만 시기는 미정입니다.

● 리서치 프리뷰 단계 — 아직 완성된 기능이 아닙니다. 버그가 있을 수 있고, 화면을 가리는 창이 있으면 인식하지 못하는 경우가 발생합니다.

● 브라우저 제어 시 제한 — 브라우저를 Computer Use로 조작하려면 Claude Chrome 확장 프로그램(Claude in Chrome)이 설치되어 있어야 합니다. 보안상의 이유입니다.

● 권한 요청 — 새로운 앱에 접근할 때마다 사용자에게 허용 여부를 묻습니다. 안전하지만 매번 수동으로 허용 버튼을 눌러야 하는 번거로움이 있습니다.

● 민감 정보 주의 — Claude가 스크린샷을 찍어 화면 내용을 읽습니다. 금융 앱, 의료 정보, 법률 문서 등 민감한 정보가 표시된 상태에서는 사용을 자제하십시오. 투자 플랫폼과 암호화폐 앱은 기본적으로 차단되어 있습니다.

● 루핑 현상 — 간혹 목표 앱이나 버튼을 찾지 못해 같은 동작을 반복하는 경우가 있습니다. 이때는 중지하고 화면에 방해 요소가 없는지 확인한 뒤 다시 시도하십시오.

9. Computer Use vs OpenClaw

2026년 초 GitHub 스타 68,000개를 넘기며 화제가 된 오픈소스 AI 에이전트 OpenClaw가 있습니다. WhatsApp, Telegram 등 메신저 앱과 연동하여 파일 관리부터 브라우저 자동화까지 처리하는 도구입니다. OpenAI가 이 프로젝트를 인수하면서 업계의 이목이 집중되었습니다.

Claude Computer Use는 이 흐름에 대한 Anthropic의 응답입니다. OpenClaw가 macOS, Windows, Linux를 모두 지원하고 플러그인 기반으로 확장성이 넓은 반면, 설정이 복잡하고 보안 관리를 사용자가 직접 해야 합니다. Claude Computer Use는 macOS로 한정되지만, 앱에 내장된 형태로 설정이 훨씬 쉽고, 앱별 권한 요청(Permission-first) 방식으로 보안이 체계적입니다.

10. 설정 전체 요약: 5단계 체크리스트

AI가 사람의 손과 눈을 대신하는 시대가 시작되었습니다. 아직 리서치 프리뷰이므로 완벽하지 않지만, 그 방향만큼은 분명합니다. AI 에이전트가 화면 너머로 나와 우리의 업무 환경에 직접 개입하는 것. Claude Computer Use는 그 첫걸음이며, 앞으로 이 기능을 중심으로 수많은 자동화 워크플로가 등장할 것입니다.