데모 기반 로봇 에이전트 프로그래밍 시스템 RAPID 소개
RAPID: Robot Agentic Programming from Demonstrations
arXivRAPID는 사람이 보여준 단일 시각적 데모만으로 로봇이 수행할 프로그래밍 코드를 자동으로 생성, 검증, 개선하는 시스템입니다.
- 단순히 동작을 따라 하는 것을 넘어 물체 중심의 관계형 표현 방식을 사용해, 환경이나 물체의 변화에도 전략 자체를 재사용하도록 설계되었습니다.
- 시뮬레이션은 물론 실제 로봇 팔에서도 테스트되었으며, 물체 자세나 재질 변화 등 다양한 조건에서 높은 일반화 성능을 입증했습니다.
- 특히 단 하나의 시연만으로 복잡한 접촉 기반 조작(Nonprehensile Manipulation) 작업까지 성공적으로 수행할 수 있다는 점이 핵심입니다.
RAPID(Robot Agentic Programming from Demonstrations)는 사람이 보여준 단일 시각적 데모만으로 로봇이 수행할 프로그래밍 코드를 자동으로 생성, 검증 및 개선하는 시스템입니다. 이 과정은 테스트 가능한 작업 명세, 로봇 실행을 위한 액션 프리미티브, 그리고 프로그램 실행 및 검증을 위한 상호작용 환경이라는 세 가지 핵심 요소를 자동적으로 추론하여 처리합니다.
RAPID는 단순히 시연된 동작을 모방하는 것을 넘어, 물체 중심의 관계형 프로그래밍 표현 방식을 사용한다는 특징이 있습니다. 이는 특정 움직임 자체보다는 전략의 근본적인 구조에 초점을 맞추며, 액션 프리미티브를 객체 수준의 운동 효과를 실현하는 궤적 최적화 프로그램으로 표현합니다. 또한, 실행 시점의 장면별 기하학을 포착하는 관계형 제약 조건을 통해 동작들을 조합하여 재사용성을 높입니다.
이 시스템은 시뮬레이션 환경과 실제 로봇 팔(Franka arm) 모두에서 평가되었습니다. LIBERO-Pro 를 사용하여 여덟 가지의 접촉 기반 비파지 조작 작업 및 일반적인 파지 조작 작업을 수행했습니다. 실험 결과, RAPID는 물체의 자세, 모양, 재질, 환경 변화 등 다양한 조건에서도 높은 일반화 성능을 입증하며 강력한 성능을 보여주었습니다.
용어 풀이
- 벤치마크
- 모델 성능을 같은 조건에서 비교하려고 만든 시험 문제 모음.