데스크톱 앱 상호작용용 computer use 추가
GitHub Copilot CLI와 앱에 computer use가 추가되어 데스크톱 앱 작업을 자동화할 수 있습니다.
교안에 영향
이전 안내 글의 Copilot CLI와 앱은 데스크톱 앱을 직접 조작하지 못한다는 설명이 맞지 않음
요약
- GitHub Copilot CLI와 GitHub Copilot app에 computer use가 공개 미리보기로 추가되어 데스크톱 앱과 상호작용할 수 있습니다. - Copilot이 접근성 정보와 화면 맥락을 읽고, 클릭·입력·편집·키 입력·스크롤·드래그로 GUI 전용 앱 작업을 자동화할 수 있게 됐습니다. - 컴퓨터 제어 전 승인 요청, 항상 허용한 앱의 검토/초기화, macOS의 Accessibility 및 Screen Recording 권한 안내가 포함됩니다. - /computer on, /computer show, /computer off 같은 시작·상태 확인·비활성화 명령과 앱 설정에서 켜는 방법이 제공됩니다.
바뀐 것
새 기능
- GitHub Copilot CLI와 GitHub Copilot app에 computer use가 공개 미리보기로 추가되어 데스크톱 앱과 상호작용할 수 있습니다.
- Copilot이 접근성 정보와 화면 맥락을 읽고 클릭, 입력, 편집, 키 입력, 스크롤, 드래그로 GUI 전용 앱 작업을 자동화할 수 있게 됐습니다.
- /computer on, /computer show, /computer off 같은 시작, 상태 확인, 비활성화 명령과 앱 설정에서 켜는 방법이 제공됩니다.
개선
- 컴퓨터 제어 전 승인 요청, 항상 허용한 앱의 검토/초기화, macOS의 Accessibility 및 Screen Recording 권한 안내가 포함됩니다.