OmniBrain-0, 조작과 내비게이션을 하나의 경량 에이전트 모델로 통합한 구체화된 지능 연구
OmniBrain-0: A Unified Agentic Model for Embodied Intelligence
OmniBrain-0은 로봇의 조작(manipulation)과 내비게이션을 하나의 공유 고수준 의사결정 모델로 조율하는 경량 통합 구체화 에이전트다. 작업 이해, 계획, 진행 추적, 피드백 기반 복구를 한 모델에 통합했다. 학습은 구체화 사전학습, 도메인 특화 에이전트 증류, 다중 교사 온폴리시 증류(MOPD)로 이어지는 단계적 프레임워크로 진행된다. 강력한 교사 모델의 상호작용 경험을 조작 및 내비게이션 전문가에게 증류하고, 그 의사결정 능력을 OmniBrain-0으로 통합한다. 통합은 도구 인터페이스 수준이 아니라 학습된 의사결정 모델 내부에서 일어난다고 설명한다. 또한 Meta-Agent가 실행 근거를 세분화된 루브릭, 단계별 리마인더, 검증된 궤적으로 바꾸는 데이터 플라이휠인 루브릭 기반 재귀적 자기 개선(RSI)을 도입했다. 평가는 LIBERO-Pro, LIBERO-Plus, RoboCasa365, RoboTwin 2.0, R2R-CE Val-Unseen 및 여러 실제 조작 과제에서 수행되었으며, 폐쇄형 교사 모델 대비 추론 및 실행 오버헤드가 크게 낮으면서도 교차 도메인 과제 성능을 유지했다고 보고한다.
구체화 에이전트를 조작과 내비게이션 전반에 쓰면서도 교사 모델 대비 추론·실행 오버헤드를 낮추려는 로봇 개발자라면, MOPD 증류와 RSI 데이터 플라이휠 구조를 참고할 만하다.
원문 출처
arXiv cs.CL (계산언어학·NLP)