💡 핵심 포인트
Claude Sonnet 4.6이 컴퓨터 직접 제어 기능과 함께 출시되어 화면을 보고 사람처럼 클릭·타이핑이 가능해졌어요. OSWorld 벤치마크에서 72.5%를 기록하며 16개월 전 대비 5배 향상된 성능을 보여주고 있습니다.
🔥 오늘의 AI 코딩 뉴스 브리핑
Claude Sonnet 4.6 출시 및 컴퓨터 제어 기능 추가
Claude 최강 모델 Sonnet 4.6이 출시되면서 Pro/Max 플랜에서 컴퓨터를 직접 제어할 수 있게 되었어요. 화면을 보고 클릭, 타이핑, 스크롤까지 사람처럼 작업할 수 있습니다. 코딩부터 반복 업무까지 완전 자동화의 새 시대가 열렸네요.
Google AI Studio 바이브 코딩 플랫폼 완전 개편
Antigravity 에이전트가 통합되면서 아이디어에서 앱까지 한 번에 개발할 수 있는 새 인터페이스가 출시되었어요. 코딩 없이도 복잡한 앱을 만들 수 있는 환경이 구축되어 진입 장벽이 크게 낮아졌습니다.
Firebase Genkit Dart 프리뷰 및 Go 1.0 정식 출시
Flutter 개발자를 위한 Genkit Dart 프리뷰와 프로덕션 준비가 완료된 Go 1.0 버전이 동시에 출시되었어요. 모바일 앱과 서버 개발 양쪽에서 AI 기능 통합이 더욱 쉬워질 전망입니다.
Perplexity Computer GPT-5.3-Codex 코딩 서브에이전트 추가
전용 코딩 AI가 수천 줄 코드 작성부터 GitHub에 직접 푸시까지 모든 과정을 자동으로 처리할 수 있게 되었어요. 개발자의 생산성을 혁신적으로 높일 수 있는 강력한 도구가 등장했습니다.
🎯 오늘의 픽 — Claude Sonnet 4.6 출시 및 컴퓨터 제어 기능 추가
🎯 오늘의 픽
Claude Sonnet 4.6의 컴퓨터 제어 기능은 단순히 코드를 생성하는 수준을 넘어서, 실제 컴퓨터 화면을 보고 사람처럼 클릭하고 타이핑할 수 있어요. OSWorld 벤치마크에서 72.5%라는 획기적인 성능을 기록하며 AI 자동화의 새로운 기준을 제시했습니다.
이번 업데이트의 가장 혁신적인 부분은 컴퓨터 비전과 제어 기능의 결합이에요. Claude가 화면을 스크린샷으로 캡처하고, 그 이미지를 분석해서 어디를 클릭해야 하는지 판단한 다음, 실제로 마우스와 키보드를 조작할 수 있거든요. API가 없는 레거시 시스템이나 이미 로그인된 웹사이트에서도 작업할 수 있다는 점이 정말 강력합니다.
특히 주목할 점은 보험업계에서 94% 정확도를 달성했다는 것이에요. 복잡한 양식 작성, 데이터 입력, 다단계 애플리케이션 처리 같은 실무에서 바로 활용할 수 있는 수준까지 올라왔다는 뜻이거든요.
📋 Claude Sonnet 4.6 컴퓨터 제어 기능 시작하기 (5단계)
Claude Code 플랜 확인 및 업그레이드
claude.ai에 접속해서 현재 플랜을 확인하세요. 컴퓨터 제어 기능은 Pro($20/월) 또는 Max($40/월) 플랜에서만 사용할 수 있어요. 무료 플랜 사용자는 업그레이드가 필요합니다.
Auto Mode 활성화하기
설정에서 Auto Mode를 활성화하세요. 이 모드는 안전한 작업은 자동으로 승인하고 위험한 작업만 확인을 요청해서 권한 피로를 크게 줄여줍니다. curl | bash나 프로덕션 배포 같은 위험한 작업은 여전히 차단됩니다.
컴퓨터 사용 권한 설정
대화 시작할 때 "컴퓨터 화면을 제어해서 작업해줘"라고 요청하면 권한 설정 창이 나타납니다. 스크린샷 캡처, 마우스 클릭, 키보드 입력 권한을 모두 허용해주세요. 보안을 위해 가상 머신 환경에서 테스트하는 것을 추천해요.
첫 번째 자동화 작업 시작
간단한 작업부터 시작해보세요. "스프레드시트를 열고 A1에서 A10까지 1부터 10까지 숫자를 입력해줘" 같은 기본적인 작업으로 테스트해보세요. Claude가 화면을 캡처하고 분석한 후 실제로 마우스와 키보드를 조작하는 과정을 확인할 수 있어요.
복잡한 워크플로우 자동화
기본 테스트가 성공했다면 여러 단계를 포함한 복잡한 작업을 시도해보세요. 웹사이트에서 정보를 수집해서 스프레드시트에 정리하거나, 여러 양식을 자동으로 작성하는 작업 등을 요청할 수 있어요.
⚠️ 주의사항 및 해결책 (3가지)
1. 속도 이슈와 대응 방법
Claude가 화면을 분석하고 액션을 취하기까지 액션당 수 초가 걸려요. 인간의 밀리초 단위 클릭과는 다르게 스크린샷 촬영→업로드→처리→결정→실행 과정을 거치거든요. 시간이 많이 걸리는 작업은 밤에 돌리거나 배경에서 실행하는 것이 좋습니다.
2. 보안 위험과 보호 조치
컴퓨터 전체에 접근할 수 있다는 것은 민감한 정보에도 접근 가능하다는 뜻이에요. 중요한 문서나 비밀번호가 화면에 표시된 상태에서는 사용하지 마세요. 가능하면 전용 가상 머신이나 샌드박스 환경에서 테스트하는 것을 강력히 추천합니다.
3. 권한 피로 문제
초기 설정에서는 매번 권한 확인 팝업이 뜰 수 있어요. Auto Mode를 활성화하거나 프로젝트별로 .claude/settings.json 파일에서 permissions.deny 설정을 통해 특정 파일 접근을 제한하면서도 일반적인 작업은 자동 승인하도록 설정할 수 있습니다.
🔥 실제 활용 예시 (3가지)
1. 데이터 수집 및 정리 자동화
여러 웹사이트에서 제품 가격, 리뷰, 재고 정보를 수집해서 스프레드시트로 정리하는 작업을 완전 자동화할 수 있어요. 사용자 후기를 보면 보험 업계에서 94% 정확도로 복잡한 양식 작성과 데이터 입력을 처리하고 있다고 알려져 있습니다.
2. 반복적인 관리 업무 자동화
매일 같은 시간에 특정 사이트에 로그인해서 보고서를 다운로드하고, 필요한 부분을 복사해서 다른 시스템에 입력하는 업무를 자동화할 수 있어요. API가 없는 레거시 시스템에서도 작동한다는 점이 큰 장점입니다.
3. 소프트웨어 테스팅 자동화
웹 애플리케이션이나 데스크톱 프로그램의 UI 테스팅을 자동화할 수 있어요. 사용자 시나리오에 따라 여러 버튼을 클릭하고 폼을 작성하면서 예상대로 동작하는지 확인하는 과정을 Claude가 대신 처리할 수 있습니다.
🎊 마무리
Claude Sonnet 4.6의 컴퓨터 제어 기능은 단순한 코드 생성을 넘어 실제 컴퓨터 조작이 가능한 진정한 AI 어시스턴트로의 진화를 보여줍니다. OSWorld에서 72.5%라는 획기적인 성능과 보험 업계 94% 정확도는 이제 AI 자동화가 실험적 도구가 아닌 실용적 솔루션임을 증명하고 있어요. 속도와 보안 이슈만 잘 관리한다면 반복 업무에서 데이터 처리까지 업무 효율성을 혁신적으로 높일 수 있는 강력한 도구가 되었습니다.
📌 바이브코딩 스쿨은 코딩 없이도 AI로 앱을 만들 수 있도록 매일 아침·저녁 최신 내용을 업데이트합니다. 구독하고 놓치지 마세요! 🔔
