"눈·손 달렸다"…앤트로픽, 사람 대신 컴퓨터 작업하는 AI 공개

클로드 3.5 소네트에 '컴퓨터 유즈' 베타버전 추가…SNS 게시·선거 글 작성 불가

사람 대신 컴퓨터상에서 마우스 커서를 움직이거나 버튼을 누르고 텍스트를 입력하는 인공지능(AI) 기능이 나왔다.

23일 더 버지 등 외신에 따르면 앤트로픽은 '클로드 3.5 소네트'에 해당 기능을 수행하는 '컴퓨터 유즈(Computer use)'를 베타버전으로 추가했다. 현재 사용 피드백을 받기 위해 개발자들에게 컴퓨터 유즈를 API로 제공하기 시작했다.

작동 방식은 간단하다. 사용자가 문서에 채워야 할 내용을 클로드에 부탁하면 클로드 컴퓨터 유즈는 컴퓨터 내 데이터에서 관련 정보를 수집한다.이 과정에서 컴퓨터 화면을 캡처한다. 이후 문서에 채워야 할 내용을 선별해 작성하는 식이다.

앤트로픽은 '클로드 3.5 소네트'에 해당 기능을 수행하는 '컴퓨터 유즈'를 베타버전으로 추가했다. (사진=앤트로픽 유튜브 캡처)

앤트로픽은 컴퓨터 유즈의 윤리적 사용을 위해 활용 분야를 제한했다고 밝혔다. 우선 사용자는 소셜미디어에 게시글 올릴 때 이 기능을 이용할 수 없다. 또 선거 관련 게시글 작성도 금지다. 

앤드로픽은 "컴퓨터 유즈 내부에 이를 선별할 수 있는 시스템이 탑재됐다"며 "웹 도메인 등록, 정부 웹사이트 연결도 진행 불가"라고 설명했다.

현재 앤트로픽은 이 기능을 테스트 중이다. 앤트로픽 관계자는 "이용 과정에서 오류가 발생할 가능성이 있다"며 "기능 개선을 위해 베타버전으로 조기 출시한 것"이라고 설명했다.

최근 컴퓨터 유즈를 이용한 개발자는 AI가 컴퓨터상에서 순식간에 나타나는 알림이나 오류를 놓칠 수 있다고 지적했다. AI가 사람처럼 화면을 실시간으로 물 흐르듯 보는 것이 아니라 화면 사진을 한 장씩 찍어 차례대로 인식하는 방식으로 작동해서다.

앤트로픽 관계자는 "AI가 사람처럼 컴퓨터 화면을 완벽히 인식하지 못한다"며 "드래그나 확대, 축소 같은 짧은 순간에 이뤄지는 작업이나 알림 등 빠르게 나타났다 사라지는 작업을 놓칠 가능성 있다"고 말했다.

앞서 최근 마이크로소프트 '코파일럿 비전'과 오픈AI의 '챗GPT' 데스크톱 애플리케이션도 사용자 컴퓨터 화면을 인식할 수는 있다. 구글도 제미나이 모바일 앱을 통해 이같은 기능을 제공한다. 다만 앤트로픽의 컴퓨터 유즈처럼 직접 문서 작업이나 글쓰기를 하지 못한다.

더 버지는 "컴퓨터 유즈가 사람 대신 컴퓨터 작업을 수행한다는 점이 의미 있다"고 평했다.