아르헨티나 성인 1,174명 무작위 실험 | Cruces, Fernandez Meijide, Galiani, Gálvez & Lombardi (2026) · NBER 워킹페이퍼
NBER Working Paper No. 34851 · 2026년 2월본, 2026년 10월 개정 · 동료심사 거치지 않음
75%AI 접근이 주어졌을 때 사라진 기준 교육 격차 (종합 점수)
AI 없음 0.548 표준편차→AI 접근 0.139 표준편차
연구 개요
같은 업무형 과제를 AI 도우미가 있는 집단과 없는 집단이 수행하게 하고, 이어서 AI 없이 후속 문항을 풀게 해 AI의 도움이 학습인지 위임인지를 구분합니다.
아르헨티나 · 온라인 실험2025년 9월 ~ 11월25~45세 성인세 개 패널 조사 회사로 모집개인용 컴퓨터로만 참여GPT-4.1 기반 도우미예상 약 20분 · 실제 평균 21분성적에 따라 최대 25,000페소 (약 18달러) 상품권
분석 표본 구성 (명)
완료율은 처치집단 64%, 통제집단 66%로 처리 배정에 따른 차이가 없었습니다. 평균 연령은 약 35세이고, 두 교육 집단 모두 성별이 거의 균형을 이루었습니다.
교육 집단은 어떻게 나누었나
저학력 집단
고등학교 졸업 후 고등교육을 받지 않았거나, 대학·전문대 과정의 절반 미만을 이수한 사람
고학력 집단
대학·전문대 과정의 절반 이상을 이수한 사람
항목
저학력
고학력
최종 표본
520명
654명
취업률
78%
89%
사전 AI 사용 경험
68%
77%
과제에서 도우미 사용 (처치집단)
81%
86%
사전 등록된 기준입니다. 아르헨티나에서는 비대학 고등직업교육 과정도 길고 공립 고등교육의 진입 장벽이 낮아 일부만 이수한 사람이 많기 때문에, 대학 재학 여부가 아니라 이수 비율을 기준으로 삼았습니다.
실험 설계
1. 무작위 배정AI 접근 처치 또는 통제. 처치집단은 실험 화면 안의 대화형 도우미를 간단한 사용 설명과 함께 받고, 통제집단은 AI 없이 수행합니다.
2. 주요 과제상사의 이메일과 보고서 속 글, 그림, 표를 읽고 문제의 근본 원인을 진단한 뒤 해결책을 담은 이메일을 작성합니다.
3. 후속 문항 (AI 없음)근본 원인을 서술하는 열린 문항 1개, 자료 해석과 사실 회복을 묻는 선택형 문항 2개를 도우미 없이 풉니다.
과제 버전: 카페테리아음식 배달 서비스가전제품 매장세 버전 무작위 배정 (업종 지식 불필요)
도우미는 보고서를 미리 읽은 상태였지만, 상사의 이메일과 과제 지시문은 제공되지 않았습니다.
종합 점수 구성 (사전 등록된 0~10점 기준)
내용 2/3
글쓰기 1/3
점수는 저학력 통제집단의 평균과 표준편차로 표준화했습니다. 그래서 아래 결과는 모두 표준편차 단위입니다. 채점은 GPT-5-mini와 과제별 평가 기준으로 각 응답을 10회 채점해 평균을 냈습니다.
핵심 결과: AI가 있을 때와 AI를 제거한 뒤
처치 효과: 같은 교육 집단의 통제집단 대비 (표준편차)
교육 격차: 고학력이 저학력보다 앞선 정도 (표준편차)
저학력고학력통제집단 격차처치집단 격차
두 보기는 같은 눈금입니다. 막대에 마우스를 올리면 유의성 정보가 보입니다.
글쓰기만 좋아진 것이 아니다
내용 점수와 글쓰기 점수 모두 비슷한 패턴을 보였습니다. 문제의 근본 원인을 맞힌 비율도 두 집단에서 모두 올랐습니다.
근본 원인을 맞힌 비율 (%)
11.2%p근본 원인 탐지의 처치 효과가 저학력에서 더 큰 폭
13% · 21%처치집단에서 9.75점 이상을 받은 비율 (저학력 · 고학력)
처치집단에서도 점수가 넓게 퍼져 있었고 통제집단에도 강한 바닥 효과가 없었습니다. 평균 상승은 만점 근처에 답이 몰린 기계적 결과가 아니라, 두 집단의 점수 분포가 넓게 이동했다는 해석이 가능합니다. 완료 시간은 두 집단 모두 줄었지만, 단축 폭의 교육 집단 간 차이는 유의하지 않았습니다.
학습인가, 위임인가
위임이라면AI를 제거했을 때 성과가 떨어지거나 더 나빠질 수 있습니다.
학습이라면AI가 없는 후속 문항에서도 일부 이점이 남습니다.
관찰된 결과처치집단은 통제집단보다 나빠지지 않았고, 저학력 집단에서는 일부 이점이 남았습니다. 그러나 후속 효과는 본 과제 효과보다 작았고 교육 격차가 상당 부분 재현되었습니다.
단기 이해와 회상에는 도움이 되었지만, AI가 기초 인적자본을 대신 만들어 주지는 못했다는 해석이 가능합니다.
대화 기록: 사용 빈도보다 사용 방식
약 3개두 집단의 평균 메시지 수
약 61%도움을 요청한 과제 구성요소 비율 (두 집단)
+0.174고학력 이용자의 상세 지시 지수 (표준편차)
AI 생성 내용을 전체 복사한 비율 (%)
고학력 이용자
추론을 안내하는 더 상세한 지시
더 구체적인 첫 질문
구조화된 작업 흐름, 선택적 활용
저학력 이용자
AI 생성 내용을 전체 복사한 비율이 10.1%p 더 높음
사용 강도는 비슷했지만 사용 방식은 달랐습니다. 프롬프트 방식은 처리 후 선택된 변수라 인과 효과로 해석할 수 없습니다.
탐색적 분석: AI 도움과 과제 몰입
처치집단을 AI 도움 요청 정도와 과제 몰입도로 나눈 비교입니다. 점수를 바꿔 보세요.
사후 선택 변수를 사용한 비교이므로 인과 추정이 아닙니다. 낮은 AI 도움 집단의 결과는 블로그 원고에 별도로 서술되지 않아 표시하지 않았습니다.
견고성 점검
0.981~0.986GPT-5-mini 개별 채점 반복 사이의 상관
0.9 초과사람이 10% 표본을 맹평가한 점수와 주요 AI 점수의 상관
Claude Haiku 4.5 재채점Gemini Flash 3.0 재채점과제 고정효과기초 통제변수저품질 응답 제외교육 집단 정의 변경
다른 모델로 다시 채점해도 교육 집단 간 차등 효과는 비슷했고, 여러 사양 변경에도 결과가 크게 바뀌지 않았습니다.
읽을 때 주의할 점
핵심 시사점
격차 축소는 크지만 완전하지 않다
AI 접근으로 기준 격차의 75%가 사라졌지만, 처치집단 안에서도 고학력이 0.139표준편차 앞섰습니다.
AI가 있을 때의 고득점과 AI 없는 이해는 다르다
AI를 제거한 후속 문항에서 격차가 0.200표준편차로 남았습니다. AI 사용 과제와 AI 없는 확인 과제를 짝지으면 결과물 품질과 독립적 이해를 구분할 수 있습니다.
접근보다 사용 방식
사용 빈도는 비슷했지만 고학력 이용자는 더 구체적으로 지시하고 선택적으로 통합했습니다. 결과물보다 AI와 상호작용하는 과정을 보는 평가가 필요하다는 해석이 가능합니다.
교육 적용은 조심스러운 함의
초기 사용 안내, 과제 맥락 제공, 근거 요구, 단계별 대화 같은 최소한의 지원이 저학력 학생의 진입 장벽을 낮출 가능성이 있습니다. 학교 수업이나 장기 학습을 직접 실험한 결과는 아닙니다.
연구의 한계
표본
아르헨티나 온라인 패널, 개인용 컴퓨터를 쓸 수 있는 25~45세 성인 (학생이나 특정 기업 신입사원 아님)