진짜 컴퓨터 프로그램 16개를 마우스 조작과 명령어 조작을 함께 연습할 수 있는 훈련장으로 만들고, 그 기록으로 AI를 가르친 연구다.
진짜 컴퓨터 프로그램 16개를 마우스 조작과 명령어 조작을 함께 연습할 수 있는 훈련장으로 만들고, 그 기록으로 AI를 가르친 연구다. 무엇이 문제였나 — 기존 컴퓨터 사용 AI는 화면을 보며 클릭만 하느라 오래 걸리거나, 명령어만 쓰다가 화면 상태를 놓치는 문제가 있었다. 어떻게 풀었나 — 이 논문은 Blender, LibreOffice, VLC, VS Code 같은 실제 앱을 설치하고, 각 앱에서 쓸 수 있는 명령어 도구를 찾아 붙인 뒤, 화면 조작과 명령어를 섞어 푸는 과제를 자동으로 만든다. 그래서 뭐가 좋아졌나 — 그 데이터로 9B 모델을 학습하자 성공률은 오르고, 같은 일을 끝내는 데 필요한 단계 수와 토큰 수는 줄었다. ...