Stanford Law 연구에서 AI가 법학 교수보다 더 나은 성과를 보임

한 줄 요약

Stanford Law School 연구에서 법학 교수들은 학생 질문에 대한 동료 교수 답변보다 AI 생성 답변을 압도적으로 선호했으며, 법학 교육 제공 방식에 영향을 줄 수 있는 결과를 보임

핵심 내용

• Stanford Law School 연구에서 법학 교수들은 학생 질문에 대한 동료 교수 답변보다 AI 생성 답변을 압도적으로 선호했으며, 법학 교육 제공 방식에 영향을 줄 수 있는 결과를 보임

• 미국 로스쿨 법학 교수 16명이 참여한 블라인드 평가에서 약 3,000건의 익명 비교가 이뤄졌고, AI는 교수 답변과의 직접 비교에서 75% 승률을 기록함

• 참가자들은 계약법 수업 후나 오피스아워에서 학생이 물을 법한 40개 질문을 만들고 직접 답변한 뒤, 출처를 모른 채 AI와 동료 교수 답변을 평가함

• 교수들은 AI 답변을 교육적으로 해롭다고 표시한 비율이 3.5% 였고, 동료 교수 답변은 12% 였으며, AI 시스템은 연구 내 최고 수준 인간 강사와 비슷한 성과를 보임

• 결과는 AI 튜터의 전면 도입을 뒷받침하지는 않지만, 법학처럼 판단이 중요한 분야에서도 책임 있는 배포 방식을 논의할 근거를 제공함

왜 중요한가

미국 로스쿨 법학 교수 16명이 참여한 블라인드 평가에서 약 3,000건의 익명 비교가 이뤄졌고, AI는 교수 답변과의 직접 비교에서 75% 승률을 기록함 참가자들은 계약법 수업 후나 오피스아워에서 학생이 물을 법한 40개 질문을 만들고 직접 답변한 뒤, 출처를 모른 채 AI와 동료 교수 답변을 평가함 교수들은 AI 답변을 교육적으로 해롭다고 표시한 비율이 3.5% 였고, 동료 교수 답변은 12% 였으며, AI 시스템은 연구 내 최고 수준 인간 강사와 비슷한 성과를 보임

참조한 것 · 가져온 것

• 원문: https://law.stanford.edu/press/ai-outperforms-law-professors-in-stanford-law-study/

• GeekNews: https://news.hada.io/topic?id=30150