AR 기반 AAC를 활용한 상징 어휘 학습과 스크립트 통합 중재가 발달장애 초등학생의 의사소통 행동에 미치는 영향

Abstract

발달장애 학생의 의사소통 능력은 현재와 미래의 삶에 영향을 주는 매우 중요한 요소이며, 그들과 일상을 함께하는 가족의 삶의 질에도 밀접한 관련이 있다. 이처럼 의사소통은 발달장애 학생이 학교라는 작은 사회에 발을 내딛고 타인과 관계를 맺기 위한 기초적인 권리이자 필수적인 수단이다. 그러나 구어 사용에 제한을 보이는 발달장애 학생 중 일부는 자신의 요구와 생각을 적절히 표현하는 데 어려움을 보일 수 있으며, 이는 학교생활 적응과 사회적 참여를 저해하는 요인이 되기도 한다. 이에 따라 보완대체 의사소통（Augmentative and Alternative Communication, 이하 AAC）을 활용한 체계적인 중재가 요구되며, 특히 학생의 특성과 상황에 따라 다양한 의사소통 양식을 활용할 수 있도록 지원하는 다중양식적 접근이 필요하다. 그러나 일부 학생은 AAC의 상징 자체가 나타내는 의미를 이해하거나, 이를 실제 상황에서 적절한 의사소통 행동으로 표현하는 데 어려움을 보인다. 또한 다중양식적 접근에서는 학생이 동일한 의미를 서로 다른 양식으로 표현할 수 있음을 이해하고, 각 양식을 실제 맥락 안에서 사용할 수 있도록 지원할 필요가 있다. 이에 본 연구에서는 AAC 상징의 의미를 이해하고 이를 실제 의사소통 상황에서 활용하는 데 어려움을 보이는 중도 발달장애 초등학생을 대상으로 스크립트 중재와 증강현실（Augmented Reality, 이하 AR） 기반 AAC를 활용한 상징 어휘 학습을 결합한 통합 중재를 적용하였다. 이를 통해 학생이 도구적 양식인 AAC 상징 카드와 비도구적 양식인 ‘손담’을 실제 생활 맥락에서 기능적으로 사용할 수 있도록 지원하고자 하였다. 연구 참여자는 경기도 소재 특수학교에 재학 중인 중도 발달장애 초등학생 2명이다. 연구 설계는 연구 참여자에게 친숙하고 일상에서 반복적으로 경험할 수 있는 여가 활동, 학습 활동, 간식 활동의 세 가지 상황을 중심으로 상황 간 중다기초선 설계를 적용하였다. 독립변인은 스크립트 중재와 AR 기반 AAC를 활용한 상징 어휘 학습을 결합한 통합 중재이다. 스크립트 중재에서는 각 상황에서 자연스럽게 발생할 수 있는 의사소통 기회를 제공하고, 학생이 상황에 적절한 AAC 상징 카드와 ‘손담’을 사용하여 의사소통 행동을 표현하도록 지도하였다. 이어지는 AR 기반 AAC를 활용한 상징 어휘 학습에서는 범용 AR 애플리케이션인 ‘Halo AR’을 활용하여 연구 참여자가 AAC 상징의 의미를 이해하고, AAC 상징 카드와 ‘손담’의 두 가지 의사소통 양식으로 표현하는 방법을 학습하도록 하였다. 이를 위해 AAC 상징 카드를 AR 마커로 등록하였으며, 연구 참여자가 ‘Halo AR’ 애플리케이션으로 해당 상징 카드를 스캔하면 상징에 대응하는 음성 정보, 실제 맥락 영상 및 ‘손담’ 모델링 영상이 상징 카드 위에 중첩되어 제시되도록 구성하였다. 이를 통해 연구 참여자가 스크립트 상황에서 사용해야 하는 상징의 의미와 표현 방법을 구체적으로 이해하고, 도구적 양식인 AAC 상징 카드와 비도구적 양식인 ‘손담’을 모두 활용하여 의사소통 행동을 표현할 수 있도록 지원하였다. 연구 결과는 다음과 같다. 첫째, AR 기반 AAC를 활용한 상징 어휘 학습과 스크립트 통합 중재는 두 아동 모두의 의사소통 행동 총 발생 빈도를 증가시켰다. 두 아동은 기초선 단계에서 낮은 의사소통 행동 발생 빈도를 보였으나, 중재가 도입된 이후 여가 활동, 학습 활동, 간식 활동 전반에서 의사소통 행동의 총 발생 빈도가 증가하는 양상을 보였다. 둘째, 도구적 양식인 상징 카드와 비도구적 양식인 ‘손담’ 모두에서 의사소통 행동 발생 빈도가 증가하였다. 다만, 아동별 특성에 따라 수행 양상에는 차이가 나타났다. 아동 1은 AAC 상징 카드의 발생 빈도가 ‘손담’보다 높게 나타났으며, 아동 2는 ‘손담’의 발생 빈도가 AAC 상징 카드보다 높게 나타났다. 셋째, 중재 종료 3주 후에 실시된 유지 단계에서도 중재를 통해 향상된 의사소통 행동의 발생 빈도는 유지되었다. 본 연구는 중도 발달장애 초등학생을 대상으로 현장에서 활용 가능한 AR 에듀테크 기술을 활용하여 AAC 상징 어휘 학습을 지원하고, 실제 생활과 연계된 상황에서 다중양식 의사소통 기회를 제공하였다는 점에서 의의가 있다. AR 기반 AAC 상징 어휘 학습은 범용 애플리케이션을 활용하여 제작하고 적용할 수 있으므로, 학교와 가정에서 지속적으로 활용될 가능성이 있다. 또한 스크립트 중재는 아동이 일상에서 반복적으로 경험하는 생활 장면을 중심으로 구성되어, 중재에서 학습한 의사소통 행동을 실제 생활 맥락으로 확장하는 데 도움이 될 수 있다. 더불어, 발달장애 학생에게 특정 의사소통 양식만을 일률적으로 적용하기보다, 아동에게 적합한 도구적·비도구적 의사소통 양식을 함께 지도할 때 상황과 필요에 따른 보다 유연한 의사소통을 기대할 수 있다. 이러한 결과는 향후 학교와 가정 등 실제 생활 맥락에서 AR 기술과 스크립트 중재를 결합한 다중양식 AAC 중재를 설계하고, 의사소통 지원이 필요한 발달장애 학생에게 적용하는 데 기초자료로 활용될 수 있을 것이다.;Communication competence is a critical factor affecting the present and future lives of students with developmental disabilities, as well as the quality of life of their family members. Communication is both a fundamental right and an essential means through which students with developmental disabilities participate in school life and build relationships with others. However, some students with developmental disabilities who have limited speech may experience difficulty expressing their needs and thoughts appropriately, which may hinder their school adjustment and social participation. Therefore, systematic intervention using augmentative and alternative communication （AAC） is needed. In particular, a multimodal approach is necessary to support students in using a variety of communication modes according to their individual characteristics and situational needs. Nevertheless, some students experience difficulty understanding the meanings conveyed by AAC symbols or using them to produce appropriate communicative behaviors in real-life contexts. In addition, multimodal approaches should support students in understanding that the same meaning can be expressed through different modes and in using each mode appropriately within authentic contexts. Accordingly, this study implemented an integrated intervention combining script intervention and augmented reality （AR）-based AAC symbol vocabulary instruction for two elementary school students with severe developmental disabilities who had difficulty understanding AAC symbols and using them in actual communication situations. The intervention was designed to support the functional use of both an aided communication mode, AAC symbol cards, and an unaided communication mode, “Sondam,” in everyday contexts. The participants were two elementary school students with severe developmental disabilities enrolled in a special school in Gyeonggi-do, South Korea. A multiple-baseline-across-settings design was employed across three familiar and repeatedly experienced daily contexts: leisure activities, academic activities, and snack activities. The independent variable was an integrated intervention combining script intervention and AR-based AAC symbol vocabulary instruction. During script intervention, naturally occurring communication opportunities were provided in each setting, and participants were taught to produce communicative behaviors appropriate to the situation using AAC symbol cards and “Sondam.” During the subsequent AR-based AAC symbol vocabulary instruction, the general-purpose AR application Halo AR was used to help participants understand the meanings of AAC symbols and learn how to express them using both AAC symbol cards and “Sondam.” AAC symbol cards were registered as AR markers. When participants scanned a symbol card using the Halo AR application, corresponding auditory information, real-life contextual videos, and “Sondam” modeling videos were overlaid on the symbol card. This procedure was intended to help participants understand the meanings of symbols and their corresponding modes of expression needed in the script situations, thereby supporting the use of both aided and unaided communication modes. The integrated intervention increased the total frequency of communicative behaviors for both participants. Although both students demonstrated low frequencies of communicative behaviors during baseline, the total frequency of communicative behaviors increased across leisure, academic, and snack activity settings after the intervention was introduced. In addition, the frequencies of communicative behaviors increased in both the aided mode of AAC symbol cards and the unaided mode of “Sondam.” However, differences were observed according to individual characteristics. Participant 1 demonstrated a higher frequency of AAC symbol card use than “Sondam,” whereas Participant 2 demonstrated a higher frequency of “Sondam” use than AAC symbol cards. Furthermore, the improved frequency of communicative behaviors was maintained during the maintenance phase conducted three weeks after the completion of the intervention. This study is significant because it supported AAC symbol vocabulary learning through AR-based educational technology that can be applied in educational settings and provided opportunities for multimodal communication in contexts connected to everyday life. Because AR-based AAC symbol vocabulary instruction can be developed and implemented using a general-purpose application, it may be continuously used in schools and homes. In addition, script intervention, which is organized around daily situations repeatedly experienced by students, may facilitate the transfer of communicative behaviors learned during intervention to authentic contexts. Furthermore, rather than uniformly applying a single communication mode to students with developmental disabilities, teaching both aided and unaided communication modes appropriate to individual characteristics may promote more flexible communication according to situational demands and needs. These findings may provide a foundation for designing and implementing multimodal AAC interventions that combine AR technology and script intervention for students with developmental disabilities who require communication support in everyday settings such as schools and homes.