생성 AI의 학습 효과: 고등 수학 사례

생성 인공지능(AI)은 인간의 업무 방식에 혁신을 가져오며 생산성 향상에 기여하고 있습니다. 그러나 AI가 새로운 기술 습득, 즉 학습에 미치는 영향은 중요한 미해결 과제입니다. 장기적인 생산성, 특히 AI의 오류 가능성을 고려할 때 사용자의 학습은 필수적입니다. 본 연구는 고등학생을 대상으로 한 현장 실험을 통해 생성 AI 튜터가 학습에 미치는 영향을 탐구했습니다. 거의 천 명의 고등 수학 학생들에게 두 가지 유형의 생성 AI 튜터에 대한 접근 권한을 제공했습니다. 하나는 일반적인 ChatGPT 인터페이스를 모방한 'GPT Base'이고, 다른 하나는 학습을 보호하도록 설계된 프롬프트를 포함한 'GPT Tutor'입니다. 이를 통해 도구 설계가 학습에 미치는 차별적인 영향을 분석했습니다. 연구 결과, GPT-4 접근이 문제 해결 능력 향상에 크게 기여함이 확인되었습니다 (GPT Base는 성적 48%, GPT Tutor는 127% 향상). 그러나 AI 접근 권한이 없어진 후에는 GPT Base를 사용했던 학생들이 AI를 전혀 사용하지 않은 학생들보다 성적이 17% 하락하는 역효과가 나타났습니다. 이는 무제한적인 생성 AI 접근이 교육적 성과에 해를 끼칠 수 있음을 시사합니다. GPT Tutor에 적용된 안전장치는 이러한 부정적인 학습 효과를 상당 부분 완화했습니다. 안전장치가 없을 경우, 학생들은 연습 문제 풀이 시 GPT-4를 '보조 도구'로만 활용하려 했고, 결과적으로 스스로 문제를 해결하는 능력은 저하되었습니다. 따라서 의사결정권자들은 기술 학습과 장기적인 생산성을 보존하기 위해 생성 AI 배포 시 설계 선택에 신중해야 합니다.