윈도용 챗GPT, 앱 화면·텍스트 넘기는 Appshots 출시

오픈AI가 윈도용 ChatGPT에 현재 사용 중인 애플리케이션 화면과 텍스트를 대화 맥락으로 전달하는 Appshots 기능을 추가했다. 사용자는 이 기능으로 오류 화면을 분석하거나 디자인·미리보기 화면을 바탕으로 코드와 자산 수정을 요청할 수 있다.

오픈AI 공식 문서는 윈도용 ChatGPT 앱에 Appshots가 추가됐다고 설명했다. macOS에서는 Codex 앱의 Appshots 기능이 별도로 안내돼 있다. 윈도에서는 키보드의 Alt 키 두 개를 눌러 기능을 실행할 수 있으며, 설정에서 사용자 지정 단축키를 지정할 수도 있다.

Appshots가 전달하는 정보는 현재 가장 앞에 있는 애플리케이션 창의 이미지와 해당 창에서 읽을 수 있는 텍스트다. 화면에 보이는 문구뿐 아니라 애플리케이션이 별도로 제공하는 화면 밖 텍스트가 포함될 수 있다.

사용자는 오류 메시지가 표시된 화면을 공유하고 원인을 물을 수 있다. 디자인이나 미리보기 화면을 보낸 뒤 관련 코드와 자산의 수정 방향을 요청하거나, API 문서·이메일·일정 화면을 공유하고 후속 작업을 맡기는 방식도 가능하다.

기존에는 화면을 캡처한 뒤 파일을 첨부하거나 필요한 내용을 직접 복사해 대화창에 붙여넣어야 했다. Appshots는 현재 작업 중인 창을 대화에 바로 첨부해 수동 설명 단계를 줄이는 데 초점을 맞췄다.

기능을 실행하면 기본적으로 새 대화가 시작된다. 사용자는 설정에서 Appshots가 연결될 목적지 대화를 변경할 수 있다.

윈도에서는 ChatGPT 기본 창에서 기능이 열리며, macOS의 Codex 앱에서는 화면 녹화와 손쉬운 사용 권한이 필요하다.

조직용 계정은 관리자가 Appshots 사용을 허용했는지에 따라 이용 가능 여부가 달라질 수 있다. 윈도용 기능에 macOS와 같은 권한 절차가 명시됐는지는 오픈AI 공식 문서에서 확인되지 않는다.

공유된 Appshots는 대화에 첨부되며, 저장·보관·삭제 방식은 ChatGPT의 파일 및 대화 데이터 정책과 계정·워크스페이스 설정에 따른다.

일부 애플리케이션과 웹사이트에서는 화면에 보이는 이미지와 텍스트만 전달될 수 있다. 구글 문서, Gmail, 구글 스프레드시트, 구글 슬라이드 등이 해당 사례로 제시됐으며, 전체 문서나 화면 밖 정보가 항상 전달되는 것은 아니다.

Appshots는 윈도용 ChatGPT에서 사용자가 작업 중인 애플리케이션의 맥락을 대화에 연결하는 기능이다. ChatGPT가 활용할 수 있는 정보의 범위는 화면에 표시된 내용과 각 애플리케이션이 제공하는 텍스트에 따라 달라진다.