AI 튜터가 성적을 올렸지만, 문제는 학생들이 쓰지 않는다는 것
AI Tutoring with Khanmigo in a Two-Year School Experiment
테네시주 중학교 18곳에서 2년간 진행된 무작위 대조 실험에서, Khan Academy의 AI 튜터 Khanmigo를 정답 대신 코칭하도록 설정해 매일의 보충 수학 시간에 활용하게 했다. 그 결과 수학 성취도는 학기당 전국 백분위 1.3점, 1년에 약 0.06~0.08 표준편차 상승했다. 하지만 이는 AI 없는 Khan Academy 연습과 비슷한 수준으로, 학생들이 튜터를 거의 활용하지 않았기 때문이라는 분석이 나온다.
96%의 학생이 Khanmigo를 최소 한 번은 시도했지만, 중간값 기준 학생은 연습한 날의 3분의 1에만 메시지를 보냈고, 실수한 연습 세션 중 17%에서만 튜터에게 메시지를 보냈다.