이미지 검색 모델이 '빨간 컵이 파란 그릇 왼쪽' 같은 세부 설명을 잘 구분하지 못하는 문제를, 더 똑똑한 모델의 채점표를 가르쳐서 해결한 연구다.

이미지 검색 모델이 ‘빨간 컵이 파란 그릇 왼쪽’ 같은 세부 설명을 잘 구분하지 못하는 문제를, 더 똑똑한 모델의 채점표를 가르쳐서 해결한 연구다. 무엇이 문제였나 — 기존 MLLM 임베딩 모델은 ‘속성-객체 결합’ 같은 조합을 구분하지 못해, 비슷한 그림을 헷갈려 했다 어떻게 풀었나 — 같은 모델이라도 ‘교차 어텐션 재순위 모델’로 쓰면 이런 차이를 잘 본다는 사실을 이용해, 재순위 모델의 5단계 채점표를 임베딩 모델에 증류(가르침)했다 그래서 뭐가 좋아졌나 — 조합 추론 성능은 크게 끌어올리면서 일반 이미지 검색 능력은 유지했고, 다중 조건 검색(MCMR) 같은 실전 벤치마크에서도 이 개선이 그대로 옮겨갔다 ...

2026년 9월 5일 · 7 분 · 1296 단어 · TechLLM
네 종류 로봇이 자연어 명령으로 복잡한 환경을 탐색하는 핸드드로잉 스타일 일러스트

Uni-LaViRA — 언어·비전·로봇 행동을 하나로 묶는 제로샷 체화 항법

개요 항법(Navigation)에는 특수한 성질이 있다. 목적지까지 가는 결정 구조가 언어 방향 명령과 픽셀 수준 시각 타깃이라는 두 출력으로 환원된다. 이 두 출력은 사전 학습된 MLLM의 자연 출력 공간 안에 있다. 즉, 로봇 데이터로 학습하지 않아도 추론으로 풀 수 있다. Uni-LaViRA는 이 통찰을 네 가지 과제 군과 네 종류 실제 로봇에 동시에 적용한 통합 에이전트 아키텍처다. ...

2026년 5월 28일 · 3 분 · 602 단어 · TechLLM