교사-AI 협업에 기반한 평가 문항 설계 탐색: 가정 교과 교사의 ChatGPT 활용 사례를 중심으로

Exploring Assessment Item Design through Teacher-AI Collaboration: A Case Study of ChatGPT Use by Home Economics Teachers in Korea

본 연구는 중등 가정 교과 교사들이 생성형 인공지능인 ChatGPT를 활용하 여 서·논술형 평가 문항을 설계하는 실제 과정을 질적으로 분석하고, 교사-AI 협업의 가능성과 조건을 탐색하였다. 연구 참여자 16명은 성취기준 기반 문항 생성, 지문·자 료 활용 문항 구성, 루브릭 요청 및 편집의 3단계 과업을 수행하였다. 수집된 프롬프트, AI 응답, 교사 수정본, 자기 보고서를 NVivo와 Python 기반 도구로 분석하였다. 연구 결과, 교사들은 대부분 AI 응답을 수정하거나 재구성하였으며, 프롬프트 설계 역량과 교과 전문성이 AI 활용의 질에 영향을 미치는 핵심 요인으로 작용하였다. 또한 AI의 응답은 초안 제공에는 유용하지만, 수업 맥락과 평가 목적에 부합하도록 보완하기 위해서는 교사의 판단과 편집이 필수적이었다. 본 연구는 생성형 AI가 교사의 교육적 설계 역량과 결합할 때 실질적 협업 도구로 활용될 수 있음을 시사하며, 교사 중심의 AI 리터러시 교육과 비판적 활용 역량의 함양이 필요함을 제언하였다.

This study aims to qualitatively analyze how secondary home economics teachers utilize generative AI, specifically ChatGPT, to develop constructed-response assessment items, and to identify strategic patterns and pedagogical implications. Sixteen teachers participated in an experimental task to design assessment items using generative AI in the context of their actual teaching. The research focused on how teachers constructed prompts, interacted with AI-generated responses, and revised the output. Findings revealed that teachers did not passively accept AI responses but employed structured prompt strategies and iterative modifications to ensure alignment with curriculum standards, student cognitive levels, and instructional contexts. Notably, the quality of AI-generated items was strongly influenced by the teacher’s prompt design skills. Patterns of AI use also varied by age group and teaching experience, reflecting differences in pedagogical judgment and strategic engagement with the tool. This study suggests that while generative AI offers efficiency and diversity in assessment design, its educational validity depends on teachers’ interpretive agency and expertise. Practical implications are offered for teacher training and curriculum planning in the era of AI-integrated education.