창간 준비호

말로 묻는 인공지능 도우미, 오류 절반 넘게 놓쳤다

5·6학년 23명 실험, 화면을 공유해도 프로그램 상태와 어긋났다

쎈프레스 편집국읽는 데 2분
말로 묻는 인공지능 도우미, 오류 절반 넘게 놓쳤다

5·6학년 학생이 스크래치(Scratch)로 코딩하며 화면을 공유하고 말로 묻는 인공지능 도우미를 쓴 실험 결과가 나왔다. 연구진은 도우미의 답이 알아듣기 쉬웠지만 학생 화면의 오류를 자주 놓쳤다고 밝혔다.

지금까지

스크래치는 어린이가 프로그래밍을 처음 배울 때 쓰는 학습 도구다. 코딩하다 막히면 오류를 찾아 고치는 일이 어려운데, 이때 글로 된 길고 자세한 설명이나 힌트가 오히려 부담이 될 수 있다. 그래서 글 대신 말로 도움을 주는 방법이 대안으로 거론돼 왔다.

AI 시대에는

이번 연구는 화면 공유나 카메라 정보를 바탕으로 말로 주고받는 생성형 인공지능 도우미를 어린이 수업에 써 본 것이다. 이 글은 동료 심사를 거치기 전에 공개된 사전 공개 논문의 초록이다. 연구진은 먼저 학생 없이 과제 8개로 시험해 본 뒤, 스크래치 수업 6차시를 들은 5·6학년 23명이 같은 8개 과제를 도우미와 풀게 하고 설문까지 받았다고 밝혔다. 연구진은 도우미의 답이 알아듣기 쉽고 바로 따라 할 수 있었으며, 한 번의 답으로 정답을 통째로 알려 준 경우는 없었다고 분석했다. 그러나 수업에서 오류와 관련된 대화 603번 가운데 61.5%에서 이미 있던 오류를 짚지 못했다. 학생 없이 한 시험에서는 이 비율이 15.7%였다. 영상으로 답이 틀릴 수 있다고 미리 설명했는데도 39.1%의 어린이는 도우미의 답이 늘 맞는다고 믿었다. 연구진은 사람 같은 목소리가 정확한 도움을 보장하지는 않으며, 화면 공유만으로는 프로그램의 현재 상태에 맞는 답이 나오지 않는다고 결론지었다.

지금 해 볼 것

  • 아이가 인공지능 도우미를 쓸 때는 답을 그대로 따르지 말고, 스크래치 화면과 직접 맞춰 보게 한다.
  • 교사나 보호자는 인공지능이 일부러 틀린 답을 내는 사례를 함께 찾아보며 '틀릴 수 있다'는 점을 체험하게 한다.
  • 인공지능 도우미를 만드는 개발자는 화면을 공유하는 것만 믿지 말고, 답이 실제 프로그램 상태와 맞는지 따로 점검한다.

원문에서 확인한 사실

  • 연구 대상은 스크래치로 프로그래밍을 배우는 5·6학년 학생이고, 말로 대화하는 생성형 인공지능 도우미를 썼다.
  • 학생 없이 과제 8개로 먼저 시험한 뒤, 스크래치 수업 6차시를 들은 학생 23명이 같은 8개 과제를 도우미와 풀고 설문에 답했다.
  • 도우미의 답은 알아듣기 쉽고 바로 따라 할 수 있었으며, 한 번의 답으로 완전한 해법을 알려 준 경우는 없었다.
  • 수업 중 오류 관련 대화 603번 가운데 61.5%에서 도우미가 이미 있던 오류를 놓쳤고, 학생 없이 한 시험에서는 15.7%였다.
  • 어린이의 음성 질문은 짧았고 대체로 도우미의 말에 답하는 내용이었다.
  • 답이 틀릴 수 있다는 영상을 보았는데도 어린이의 39.1%는 도우미의 답이 늘 맞는다고 믿었다.
#스크래치#인공지능 튜터#코딩 교육#음성 대화

이 기사는 쎈프레스 편집국이 공개된 원문을 바탕으로 정리했습니다. 원문에 없는 내용은 싣지 않는 것을 원칙으로 하며, 틀린 곳은 010-8114-3468로 알려 주시면 바로 고칩니다.

넘겨 보기로 이어 보기

이어서 읽기