Operator: OpenAI가 공개한, 사용자의 브라우저를 활용하여 작업을 수행하는 AI 에이전트 (feat. CUA, Computer-Using Agent)

읽을거리&정보공유
, , , ,
1

Operator: OpenAI가 공개한, 사용자의 브라우저를 활용하여 작업을 수행하는 AI 에이전트 (feat. CUA, Computer-Using Agent)
Operator: OpenAI가 공개한, 사용자의 브라우저를 활용하여 작업을 수행하는 AI 에이전트 (feat. CUA, Computer-Using Agent)1128×434 13.4 KB

Operator 소개

Operator는 OpenAI가 새롭게 공개한 AI 에이전트로, 브라우저를 활용해 사람이 하는 작업을 대신 수행할 수 있습니다. 입력, 클릭, 스크롤과 같은 행동을 통해 웹페이지와 상호작용하며, 양식을 작성하거나, 물건을 주문하고, 간단한 콘텐츠(예: 밈)까지 생성할 수 있습니다.

OpenAI의 Operator 소개
OpenAI의 Operator 소개1200×675 132 KB

이러한 AI Agent는 OpenAI의 CUA(Computer-Using Agent) 모델로 구동됩니다. CUA는 GPT-4o의 비전 기능과 강화 학습을 결합하여 그래픽 사용자 인터페이스(GUI)를 이해하고 상호작용할 수 있는 새로운 경지를 보여줍니다. 특히, 사용자 경험을 개선하기 위해 Operator는 오류를 자체적으로 수정하거나 필요한 경우 사용자가 개입할 수 있도록 설계되었습니다. Operator가 기존의 AI 도구와의 차이점은 다음과 같습니다:

  1. API 통합 불필요: 대부분의 AI 기반 도구는 API와 통합이 필요하지만, Operator는 브라우저의 GUI를 직접 조작하기 때문에 추가 통합 없이 작동합니다.

  2. CUA 기반 학습: Operator는 브라우저 상호작용을 학습하는 데 초점을 둔 CUA 모델로 훈련되어 WebArena 및 WebVoyager 같은 주요 벤치마크에서 새로운 기준을 세웠습니다.

  3. 사용자 협업 지원: 민감한 정보 입력(예: 로그인, 결제)이나 CAPTCHAs 처리 같은 작업에서는 사용자가 개입할 수 있도록 유도합니다.

현재 Operator는 미국 내 ChatGPT Pro 사용자에게만 제공되지만, 향후 Plus, Team, Enterprise 사용자로 확대될 예정입니다. OpenAI는 이 초기 연구 프리뷰를 통해 사용자 피드백을 수집하고, 안전성과 정확성을 점진적으로 개선하려고 합니다.

Operator의 주요 기능 및 사용 방법

주요 기능

  • 브라우저 작업 자동화: 반복적인 양식 작성, 주문, 간단한 콘텐츠 생성 등 다양한 작업을 지원.
  • 다중 작업: 여러 브라우저 탭을 열듯 여러 작업을 동시에 수행 가능.
  • 사용자 지정 워크플로우: 특정 웹사이트나 작업에 대한 맞춤형 명령을 추가 가능.
  • 작업 저장: 반복적인 작업을 위한 프롬프트 저장 기능 제공.

사용 방법

  1. 작업 설명: 수행할 작업을 간단히 설명하면 Operator가 나머지를 처리.
  2. 사용자 개입: 민감한 작업(로그인, 결제 등) 시 사용자가 작업을 직접 수행할 수 있도록 요청.
  3. 다중 작업: 동시에 여러 작업 실행 가능, 예를 들어 한쪽에서 캠핑 예약을 진행하면서 다른 쪽에서 개인화된 제품 주문 가능.
  4. 작업 모니터링: 필요 시 Watch Mode로 작업 감독 가능.

사용 예시

1. Instacart에서 장보기 목록 생성.
2. Etsy에서 맞춤 머그컵 주문.
3. Booking.com에서 항공편 선호도 설정.

안전성 및 프라이버시

Operator는 안정성 및 프라이버시를 위해 다음과 같은 세 가지 주요 보호 계층을 갖추고 있습니다:

  1. 사용자 제어 중심

    • 민감한 정보 입력 시 사용자 개입 요청.
    • 주요 작업 완료 전 사용자 확인 요청.
    • 고위험 작업(예: 금융 거래) 거부.

  2. 프라이버시 관리

    • 브라우징 데이터 및 과거 대화를 클릭 한 번으로 삭제 가능.
    • 데이터 학습 사용 여부 설정 가능.

  3. 악의적 웹사이트 방어

    • 프롬프트 인젝션 감지 및 무시.
    • 의심스러운 동작 감지 시 작업 중지.

한계점

Operator는 여전히 초기 단계의 기술로, 복잡한 인터페이스(예: 슬라이드쇼 생성, 캘린더 관리)에서는 제한이 있습니다. 사용자의 피드백을 통해 개선이 이루어질 예정입니다.

:house: Operator 홈페이지 (현재 미국:us:지역에서만 접근 가능)

:scroll: OpenAI의 Operator 소개 블로그

https://openai.com/index/introducing-operator/

:scroll: OpenAI의 CUA(Computer-Using Agent) 소개 블로그

https://openai.com/index/computer-using-agent/



이 글은 GPT 모델로 정리한 글을 바탕으로 한 것으로, 원문의 내용 또는 의도와 다르게 정리된 내용이 있을 수 있습니다. 관심있는 내용이시라면 원문도 함께 참고해주세요! 읽으시면서 어색하거나 잘못된 내용을 발견하시면 덧글로 알려주시기를 부탁드립니다. :hugs:

:pytorch:파이토치 한국 사용자 모임:kr:이 정리한 이 글이 유용하셨나요? 회원으로 가입하시면 주요 글들을 이메일:love_letter:로 보내드립니다! (기본은 Weekly지만 Daily로 변경도 가능합니다.)

:gift: 아래:arrow_lower_right:쪽에 좋아요:+1:를 눌러주시면 새로운 소식들을 정리하고 공유하는데 힘이 됩니다~ :star_struck:

1개의 좋아요