리서치 연구
Dude: A Dual-Detection Multi-Agent System for Paper-Code Discrepancy Detection
ARarXiv
학술 논문과 실제 구현 코드 간의 불일치(discrepancy)를 자동으로 검출하는 'Dude'라는 다중 에이전트 시스템을 개발했습니다.
세 줄 요약
- 기존 단일 모델의 한계를 극복하기 위해, 논문-코드 언어 간 세부 수준 차이를 고려한 협상 및 2단계 필터링 메커니즘을 도입했습니다.
- 실제 데이터셋 실험 결과, 기존 방식 대비 최대 22.8%의 재현율 및 18.7%의 F1 점수 향상을 입증하며 성능을 크게 개선했습니다.
- 특히, 언어적 세부 수준 비대칭성으로 인해 발생하는 오해석이나 잘못된 보고(False Positive) 문제를 효과적으로 방지하는 것이 핵심입니다.
학술 논문과 실제 구현 코드 간의 불일치(discrepancy)를 자동으로 검출하는 'Dude'라는 다중 에이전트 시스템을 개발했습니다.