Earticle

현재 위치 Home

Poster Session II : Next Generation Computing Applications II

Development of an Interactive 3D Character using Unity for Bidirectional Sign Language Translation

첫 페이지 보기
  • 발행기관
    한국차세대컴퓨팅학회 바로가기
  • 간행물
    한국차세대컴퓨팅학회 학술대회 바로가기
  • 통권
    The 10th International Conference on Next Generation Computing 2024 (2024.11)바로가기
  • 페이지
    pp.331-334
  • 저자
    Min Sung Jung, Byung-Joo Shin, Hong Jo An, Beom Mo Kim, Dong En Kim, Yong Min Cho, Gyu Tae Park
  • 언어
    영어(ENG)
  • URL
    https://www.earticle.net/Article/A468878

원문정보

초록

영어
This study presents an innovative approach to bidirectional sign language translation using an AI-based 3D interactive Unity character. We have developed a system that receives Korean text input, translates it into Korean Sign Language(KSL), and then uses Unity3D to enable a 3D character to perform sign language gestures in real-time. The system aims to deliver natural character movements while accurately reflecting the vocabulary and grammatical structure of KSL. Although the representation of non-manual signals(NMS) remains a significant challenge, the combination of Unity3D characters with AI-based translation plays a crucial role in addressing the issue of information alienation among KSL users.

목차

Abstract
I. INTRODUCTION
II. RELATED WORKS
III. METHODS
A. DATASET
B. Model for Bidirectional Sign Language Translation
C. Video Swin Transformer
D. Bidirectional Sign Language Translation Model
E. Unity3D Character Development
F. Experiment setup
IV. EXPERIMENT RESULT
A. Evaluation Criteria
B. Result
V. CONCLUSIONS
ACKNOWLEDGMENT
REFERENCES

키워드

Unity3D Interactive 3D Character Sing Language Translation Natural Language Processing Gesture Recognition

저자

  • Min Sung Jung [ dept. of Computer Science & Engineering Kyungnam university ]
  • Byung-Joo Shin [ dept. of Computer Science & Engineering Kyungnam university ] Corresponding Author
  • Hong Jo An [ dept. of Computer Science & Engineering Kyungnam university ]
  • Beom Mo Kim [ dept. of Computer Science & Engineering Kyungnam university ]
  • Dong En Kim [ dept. of Computer Science & Engineering Kyungnam university ]
  • Yong Min Cho [ dept. of Computer Science & Engineering Kyungnam university ]
  • Gyu Tae Park [ dept. of Computter Science & Engineering Kyungnam university ]

참고문헌

자료제공 : 네이버학술정보

간행물 정보

발행기관

  • 발행기관명
    한국차세대컴퓨팅학회 [Korean Institute of Next Generation Computing]
  • 설립연도
    2005
  • 분야
    공학>컴퓨터학
  • 소개
    본 학회는 차세대 PC 및 그 관련분야의 학술활동을 통하여 차세대 PC의 학문 및 기술발전을 도모하고 산업발전 및 국제협력 증진을 목적으로 한다.

간행물

  • 간행물명
    한국차세대컴퓨팅학회 학술대회
  • 간기
    반년간
  • 수록기간
    2021~2025
  • 십진분류
    KDC 566 DDC 004

이 권호 내 다른 논문 / 한국차세대컴퓨팅학회 학술대회 The 10th International Conference on Next Generation Computing 2024

    피인용수 : 0건 (자료제공 : 네이버학술정보)

    함께 이용한 논문 이 논문을 다운로드한 분들이 이용한 다른 논문입니다.

      출처 : 네이버학술정보

        0개의 논문이 장바구니에 담겼습니다.

        페이지 저장
        소속기관 조회
        이용자님의 소속기관(단체)이 서비스에 가입되어 있는지 확인해 보십시오.
        기관회원에 소속되어 있는 이용자는 원문을 무료로 이용할 수 있습니다.