리서치 연구
Solving Is Not Drawing: A Benchmark for Diagrammatic Reasoning in Olympiad Geometry
ARarXiv
arXiv에 올림피아드 기하학 도식 추론 벤치마크 논문이 공개됐다.
세 줄 요약
- 954개 올림피아드 기하학 문제, 297개 하위 집합, 사람 작성 Asymptote 코드 도형, 텍스트, 코드, 이미지, VLM, 제약 기반 지표를 제공한다.
- 기존 벤치마크가 정답 도달만 잴 때, 이 벤치마크는 도형 자체를 만드는 능력을 따로 측정한다.
- 현재 기초 모델의 도형은 충실도가 낮고, 평균 컴파일 성공률은 36.14%다.
arXiv에 올림피아드 기하학 도식 추론 벤치마크 논문이 공개됐다.