모델 연구
When Youth Enter The Chat: An Epistemic Shift in the Validation of LLM-Based Measures of Student Talk
ARarXiv
LLM을 활용한 학생 대화 분석 방식의 한계를 지적하며, 청소년이 연구 과정에 참여해야 한다고 주장했다.
세 줄 요약
- 연구진은 8학년 수학 교실의 다국어 청소년들을 대상으로 참여 관찰, 인터뷰 등 여러 방법을 사용했으며, 학생들이 LLM 분류와 코딩 체계에 이견을 제시했다.
- 기존 방식은 학생 발화의 맥락을 제거하고 성인 전문가에게 의존하는 경향이 있어 교육적 의미와 공평성을 보장하기 어렵다.
- 연구는 특히 인종적, 언어적으로 주변화된 청소년들에게 LLM 기반 측정 방식이 적절한지 확인해야 한다고 강조했다.
LLM을 활용한 학생 대화 분석 방식의 한계를 지적하며, 청소년이 연구 과정에 참여해야 한다고 주장했다.