Generative AI Can Harm Learning

PNAS: 가드레일 없는 AI는 수학 학습을 17% 감소시킨다

Bastani et al. (2025). PNAS, 122(26), e2422633122

실험 설계: 3개 조건 비교

GPT Base

ChatGPT와 유사한 표준 인터페이스
가드레일 없음

GPT Tutor

교사 설계 힌트 제공
답 직접 제공 금지
문제별 솔루션 내장

통제 집단

AI 없음
교과서와 노트만 사용

핵심 결과: 생산성 vs 학습의 분리

GPT Base

연습 +48%
시험 -17%

AI와 함께하면 잘하지만
AI 없으면 오히려 더 못한다

GPT Tutor

연습 +127%
시험 0%

가드레일이 부정적 효과를
거의 완전히 상쇄

통제 집단

기준선
기준선

비교 기준

⚠️ 핵심 메커니즘: AI를 목발(木撥)로 사용

GPT Base 학생의 67%가 단순히 "답이 뭐야?"라고 물었다.
GPT Tutor 학생의 63%는 독립적으로 풀이를 시도하거나 도움을 요청했다.
그리고 학생들은 자신의 학습 감소를 인지하지 못했다.

연구 규모

~1,000

고등학생 (9-11학년)

RCT

무작위 통제 실험

51%

GPT Base의 정답률
(논리 오류 42%)

PNAS

최고 권위 학술지

독자를 위한 핵심 인사이트