90분 AI 교육은 무엇을 남기는가

🔬연구 개요

미국 한 사립대학의 65개 분반에서 생성형 AI 기초 교육을 평가했습니다. 효과를 지식, 수행 과제, 자기효능감으로 나누어 확인합니다.

표본이 줄어든 과정 (명)

최종 표본의 집단 구성

처음에는 33개 분반을 교육 조건, 32개 분반을 비교 조건에 무작위 배정했습니다. 학생 개인이 아니라 분반 단위 배정이며, 비교 집단은 사후 평가 이후 같은 교육을 받았습니다.

🧱교육 구성

학습관리시스템에서 자율 속도로 진행했고 텍스트, 영상, 연습, 즉각적 피드백, 성찰이 들어 있습니다. 구성 요소를 따로 배정하지 않아 어떤 요소가 효과의 원인인지는 알 수 없습니다.

✅역량별 성적표

「모든 AI 역량이 향상되었다」는 요약은 정확하지 않습니다.

✍️프롬프트 작성: 수업 전 → 후 (교육 집단)

교육 집단 안의 변화(각각 +31.4, +25.5, +20.4퍼센트포인트)이며 대조군 대비 효과 크기로 읽으면 안 됩니다. 전체 루브릭 점수의 시간×집단 상호작용은 부분 η²=.19이고, 점수가 19% 올랐다는 뜻이 아닙니다.

🔎AI 출력 평가: 사후 응답 비율

전체 출력 평가 점수에는 시간×집단 상호작용이 없었습니다(p=.22). 편향 지적이 줄어든 듯 보이지만 유의한 차이가 없으므로 「교육이 편향 감지를 악화시켰다」로 읽지 않습니다. 학생은 확인할 두 측면만 고르도록 요구받아, 알고 있어도 응답에 쓰지 않았을 수 있습니다.

💪자기효능감과 지식

비교 집단이 처음에 더 낮았지만 더 크게 올라 사후 차이가 사라졌습니다. 자신감의 증가는 편향 감지나 책임 있는 사용 지식의 향상과 같은 결과가 아닙니다.

🔍읽을 때 주의할 점

💡교육 설계에 주는 질문