영어 발화 오류에 대한 AI 챗봇의 반응: AI 펭톡과 스피킹 클래스

Responses of the AI Chatbots to Erroneous Utterances: AI Pengtalk and Speaking Class

최근 초등영어학습자에게 실제적인 영어 상호작용 기회를 제공하기 위해 사용자가 직접 제작하거나 영어교육용으로 상용화된 인공지능 챗봇이 많이 활용되고 있다. 이와 같은 맥락에서 영어 발화 오류에 대해 교육적으로 적절한 챗봇 반응의 필요성에 주목한 본 연구는 영어교육 현장에서 많이 활용되고 있는 상용 챗봇 2종(AI 펭톡과 스피킹 클래스)의 영어 발화 오류 반응 양상을 분석하였다. 이를 위해 연구자는 우리나라 초등영어학습자가 주로 발화하는 것으로 보고된 발음, 어휘, 문법 오류를 AI 펭톡 및 스피킹 클래스에 입력하였고, 이에 대한 챗봇의 반응을 오류 인식과 의미협상 및 교정적 피드백 제공 여부를 중심으로 분석하였다. 연구 결과, AI 펭톡과 스피킹 클래스는 치간마찰음 발음 오류와 어휘 생략 오류 일부에 대해서는 의미협상 피드백 제공과 낮은 정답률 판정의 적절한 반응을 보였으나, 그 밖의 발음, 어휘, 문법 오류는 대부분을 정문으로 판정하였고, 그 오류에 대해 의미협상 또는 교정적 피드백을 전혀 제공하지 않았다. 이는 학습자의 영어 중간언어 발달에 교육적으로 적합하지 않은 반응으로 보인다. 따라서 이 결과를 바탕으로 본 연구에서는 학습자 오류 발화 데이터 증강과 다양한 의미협상 및 교정적 피드백의 제공을 챗봇 기능 개선 방향으로 제시한다.

AI chatbots developed by users or commercialized for English education have been recently welcomed for providing interaction opportunities to English learners. In this context, the present study, which focused on the need for pedagogically appropriate responses of chatbots to erroneous utterances, examined the response patterns to errors of two commercial chatbots (i.e., AI Pengtalk and Speaking Class) currently utilized in numerous English lessons. To this end, the researchers intentionally uttered pronunciation, vocabulary, and grammar errors reported as being frequently committed mistakes by young Korean learners of English to the chatbots. Then, the researchers analyzed the chatbots' responses to the erroneous utterances, primarily focused on error recognition, meaning negotiation, and corrective feedback. As a result, the chatbots responded appropriately to some errors in pronunciation of interdental fricative and vocabulary omission as it judged the errors as low-level achievement and provided meaning negotiation. However, the chatbots wrongly judged most other pronunciation, vocabulary, and grammar errors as correct utterances; hence, no appropriate interactional responses were given to the errors. Considering the response patterns of the chatbots to the errors as inappropriate for English learners' interlanguage development, this study suggests data augmentation of learners' erroneous utterances for the chatbots to provide more meaning negotiation and corrective feedback.