청각장애 학생을 위한 한국 수어 글로스 기반 수어 영상 생성 자동화 시스템 개발
Development of an Automated Sign Language Video Generation System Based on Korean Sign Language Glosses for Students with Hearing Impairments
With the implementation of the 2022 revised national curriculum and the expansion of online learning environments, the importance of digital-based educational resources has increased. However, educational videos that rely heavily on auditory information still pose significant accessibility barriers for deaf learners. In particular, computer science education frequently involves abstract concepts and specialized terminology, making subtitle-based support alone insufficient for effective learning. To address this issue, this study aims to enhance the accessibility of computer science education for deaf students by developing SignBridge, a system that extracts audio from educational videos, performs STT conversion and AI-based sentence correction, generates Korean Sign Language glosses, and automatically produces corresponding sign language videos. SignBridge automates the linkage between glosses and sign language videos and defines and constructs a sign language lexicon of core computer science terms to address the lack of systematic sign representations for specialized terminology. Through this approach, the study supports sign-language-based computer science education for deaf learners and improves the efficiency and usability of sign language video content creation.
한국어
2022 개정 교육과정의 적용과 온라인 교육 환경의 확산으로 디지털 기반 교육 자료의 중요성이 증대되고 있으나, 청각 정보에 의존하 는 교육 영상은 농인 학습자에게 여전히 높은 접근 장벽으로 작용하고 있다. 특히 정보 교과는 추상적 개념과 전문 용어의 사용 빈도가 높아 자막 중심의 지원 방식만으로는 학습 이해에 한계가 있다. 이에 본 연구는 농인 학습자의 정보 교과 접근성 향상을 목표로, 교육 영상의 음성을 추출하여 STT 변환과 AI 기반 문장 교정을 수행한 후 한국 수어 글로스를 생성하고, 이를 기반으로 수어 영상을 자동 생성하는 시스템 SignBridge를 개발하였다. SignBridge는 글로스와 수어 영상 간의 연계를 자동화하며, 동시에 정보 교과에서 사용되는 핵심 용어를 체계적으로 정리한 수어 사전을 정의·구축함으로써 전문 용어 수어 표현의 비체계화 문제를 해결하고자 했다. 이를 통해 농인 학습자를 위한 수어 기반 정보 교육을 지원하고, 수어 영상 콘텐츠 생성의 효율성과 활용성을 높이고자 한다.
목차
요약 ABSTRACT Ⅰ. 서론 Ⅱ. 연구 배경 1. 한국 수어의 특성 2. 한국 수어에 관한 기존 연구 분석 3. 번역 성능 평가 지표 Ⅲ. 연구 설계 Ⅳ. 연구 결과 1. 음성 추출과 STT 변환 작업 2. AI 맞춤법 검사 수행 3. AI 맞춤법 검사 수행 4. 수어 영상의 매핑과 수정 5. 정보 수어 사전 Ⅴ. 결론 참고문헌
키워드
정보 교과인공지능한국 수어영상 자동 생성청각장애informaticsartificial intelligencekorean sign languageautomatic video generationhearing impairments
제주대학교 지능소프트웨어 교육연구소 [Intelligent Software Education Research Institute]
설립연도
2022
분야
사회과학>교육학
소개
우리 연구소는 컴퓨터 과학 교육이 강조되는 세계적 흐름속에서 소프트웨어융합 인재 양성을 위한 교육 기반 구축을 위해 '지능소프트웨어교육센터'를 설립하여 운영하여 왔고, 이후 한국연구재단의 인문사회연구소지원사업에 선정되면서 2022년 3월, 우리나라 인공지능 교육의 거점 연구소로서 '지능소프트웨어교육연구소'로 새롭게 기관 명칭을 변경하고 전문 연구 기관으로서의 위상을 공고히 하였습니다.
우리 연구소는 설립된 이후부터 지금까지 인공지능을 중심으로 하는 지능정보시대를 열어갈 인공지능 컴퓨팅 융합 인재 양성을 위한 교육 기반 구축에 기여하고 있으며, 주요 연구 분야로는 지능정보사회에서 갖춰야할 디지털 소양으로써의 컴퓨팅 사고력 함양을 위한 소프트웨어와 인공지능 교육 연구, 유아부터 중장년층까지 평생교육차원의 인공지능 교육 연구, 지능정보격차 해소를 위한 정보배려계층 대상 인공지능 교육 연구, 윤리적으로 고려된 인공지능 교육으로 설계된 A!thics 교육 등의 인공지능 교육과 인공지능 기술과 응용 연구 등에 힘을 쏟고 있습니다. 또한 인문사회연구소 지원사업의 과제로 수준별 인공지능 컴퓨팅 교육을 위한 핵심 전략인 4P(Play, Problem solving, Product making, Project)전략에 기반하여 교육과정 개발과 컴퓨팅 사고력 함양을 위한 CT-EL(Computational Thinking-Experienced Learning) 기반 교수학습 방법 연구, 교재개발 등을 진행하고 있습니다.
앞으로 지능소프트웨어교육연구소는 제주 지역의 유관기관과 협력하여 제주의 미래를 이끌어갈 지능소프트웨어융합을 위한 지역 인재 양성 모델을 만드는데 앞장 서고, 더 나아가 우리나라의 인공지능 교육을 이끌어가는 우리나라 대표 연구 기관으로 자리매김할 수 있도록 최선을 다하겠습니다. 감사합니다.
간행물
간행물명
지능정보융합과 미래교육 [Intelligent Information Convergence and Future Education]