개발도구 연구
Flow-JEPA: Flow Matching for Robust Latent Dynamics in JEPA World Models
ARarXiv
기존 JEPA 기반 세계 모델은 예측 과정에서 오류가 누적되고 시각적 노이즈에 취약하다는 한계가 있었습니다. 본 연구는 이를 개선하기 위해 '흐름 매칭(Flow Matching)'을 적용한 Flow-JEPA를 제안합니다.
세 줄 요약
- F-JEPA는 현재 관찰과 행동을 기반으로 미래 잠재 상태 시퀀스를 확률적으로 예측하는 조건부 흐름 매칭 모델입니다. 그 결과, 노이즈 환경에서 성공률이 67%에서 86%로 크게 향상되었습니다.
- 이는 기존 결정론적 모델의 오류 누적 및 노이즈 민감성 문제를 근본적으로 해결합니다. F-JEPA는 더욱 견고하고 현실적인 환경 이해 능력을 갖춘 차세대 세계 모델 개발에 중요한 진전을 의미합니다.
- F-JEPA의 핵심은 점별(point-wise) 전이 회귀 대신 전체 궤적 수준의 확률적 예측을 채택했다는 점입니다. 이는 JEPA 프레임워크를 유지하면서 안정성을 극대화하는 대안입니다.
기존 JEPA 기반 세계 모델은 예측 과정에서 오류가 누적되고 시각적 노이즈에 취약하다는 한계가 있었습니다. 본 연구는 이를 개선하기 위해 '흐름 매칭(Flow Matching)'을 적용한 Flow-JEPA를 제안합니다.