Validity and Reliability of Korean Meta-Pragmatic Language Assessment for Children

배경 및 목적: 본 연구는 만 5세에서 12세 아동의 메타-화용언어능력을 평가하기 위한 도구(KOPLAC)를 개발하고, 도구의 타당도 및 신뢰도를 분석하고자 하였다. 방법: 서울 및 경기에 거주하는 아동 492명(예비검사 222명, 규준검사 270명)을 대상으로 KOPLAC을 실시하였다. 타당도의 검증을 위해 내용타당도, 구인타당도, 공인타당도를 측정했다. 또한 연령이나 학년에 따라 화용언어 능력에 차이가 있는지도 분석했다. 신뢰도의 검증을 위해 문항 내적일치도, 반분신뢰도, 검사-재검사 신뢰도로 나누어 살펴보았다. 결과: 내용타당도는 전체 평균 4.11으로 ‘적절하다’로 평가되었고, KOPLAC의 전체 점수와 하위영역 간의 구인타당도 또한 유의한 수준으로 나타났다. KOPLAC의 전체 점수와 REVT의 공인타당도 역시 비교적 높은 상관을 보였다. 또한 연령이나 학년에 따라 화용언어 전체 점수와 하위검사 모두에서 유의한 차이가 나타났다. 각 하위검사의 문항 내적일치도는 담화 및 이야기 정보추론과 상위 언어의 참조를 제외하고 높은 신뢰도를 나타냈다. 반분 신뢰도와 검사-재검사 신뢰도도 높은 신뢰도를 나타냈다. 논의 및 결론: 한국아동 메타-화용언어검사는 화용언어의 결함을 선별하는 공식적인 검사도구로서 타당도와 신뢰도가 높은 편이며, 화용언어 능력의 발달적 특성 및 추이를 파악하는 데 유용한 정보를 제공할 수 있다.

Objectives: This study investigated the validity and reliability of the Korean meta-Pragmatic Language Assessment for Children (KOPLAC). The KOPLAC has been developed to assess 5- to 12-year-old children’s pragmatic language ability. KOPLAC consists of three subtests: communication regulation, discourse and story information inferences, and metalinguistic awareness. Two hundred and seventy typically developing children participated in this study. Methods: For content validity, a 5-score-scale was conducted to validate each item. Five speech-language pathologists served as assessors and the mean score was 4.11. The correlation coefficients between each construct (5 subtests for preschoolers and 6 subtests for school-aged children) score and the total scores were calculated for construct validity. Results: Results showed significant correlation coefficients. For concurrent validity, the correlation coefficients between the results of the KOPLAC and the Receptive and Expressive Vocabulary Test (REVT) were analyzed. Every subtest is significantly correlated with REVT except for one (between metalinguistic awareness-references and REVT-expressive score). The internal consistency (Cronbach’s α) was .45-.91 for preschoolers and .40-.86 for school-aged children. The split-half reliability was .652 for preschoolers and .726 for school-aged children. Finally, the test-retest reliability was significant and highly reliable (.79-.99). Conclusion: Results of this study indicated that the KOPLAC is a valid and reliable assessment tool for measuring children’s pragmatic language ability. However, further studies should be conducted to validate the KOPLAC by providing data from children with language disorders, especially those who have pragmatic language problems.