AI 에이전트 연구
실행 가능한 세계를 수정하는 기술: 월드 에디팅 연구
World Editing: Intervening on Executable Worlds at Increasing Depth
arXiv기존에 실행 가능한 환경(게임 등)을 수정하는 '월드 에디팅' 개념을 정립하고, 마인크래프트와 테라리아 기반의 대규모 벤치마크를 개발했습니다.
세 줄 요약
- 최첨단 코딩 에이전트들은 이 벤치마크에서 높은 편집 능력을 보여주었으며, 특히 행동 기준(criterion)에서는 최대 94.8%의 성능을 기록했습니다.
- 이는 AI가 단순한 세계 생성이나 상호작용을 넘어, 기존 환경의 속성을 보존하며 의도적으로 수정하는 고유한 '편집' 역량을 가질 수 있음을 입증합니다.
- 다만, 편집 깊이가 깊어지면 신뢰도가 떨어지는 경향이 있으며, 가장 큰 난관은 단순히 로딩되는 것을 넘어 요청된 대로 정확히 '행동'하도록 만드는 것입니다.
기존에 실행 가능한 환경(게임 등)을 수정하는 '월드 에디팅' 개념을 정립하고, 마인크래프트와 테라리아 기반의 대규모 벤치마크를 개발했습니다.