Earticle

현재 위치 Home

Oral Session Ⅱ 의료, 멀티미디어 콘텐츠

Masked-GRU 딥러닝을 통한 단어 수준 수화 인식을 위한 미디어파이프 핸드 랜드마크의 잠재력 탐색
Exploring the Potential of Mediapipe Hand Landmarks for Word-level Sign Language Recognition through Masked-GRU Deep Learning

첫 페이지 보기
  • 발행기관
    한국차세대컴퓨팅학회 바로가기
  • 간행물
    한국차세대컴퓨팅학회 학술대회 바로가기
  • 통권
    2024 한국차세대컴퓨팅학회 춘계학술대회 (2024.04)바로가기
  • 페이지
    pp.103-106
  • 저자
    Zubia Naz, Muhammad Ishfaq Hussain, Suyeon Oh, Moongu Jeon
  • 언어
    영어(ENG)
  • URL
    https://www.earticle.net/Article/A468736

원문정보

초록

영어
This paper addresses the critical need for sign language recognition to improve communication for individuals with hearing impairments. Our approach involves leveraging the capabilities of computer vision and deep learning to develop an efficient sign language recognition system. By utilizing the Mediapipe library, we extract detailed hand landmarks from video input, thereby effectively capturing the nuanced movements and configurations inherent in sign language gestures. At the core of our model is the GRU network, a type of recurrent neural network (RNN) specifically designed for analyzing sequential data. The GRU architecture excels at capturing temporal dependencies, making it a well-suited choice for recognizing the dynamic nature of sign language expressions. To train our GRU network, we leverage the LSA64 dataset, which comprises comprehensive videos featuring expert sign language users. We extract hand landmarks from these videos using the Mediapipe module, enabling our model to effectively learn and recognize the intricate patterns of sign language gestures.

목차

Abstract
1. Introduction
2. Related works
3. Methods
3.1. Dataset
3.2. Experiment setup
4. Experiment result
5. Conclusions
Acknowledgment
References

키워드

MediaPipe Masking GRU Sign Language Classification Landmark Detection

저자

  • Zubia Naz [ EECS Gwangju Institute of Science and Technology Gwangju,South Korea ]
  • Muhammad Ishfaq Hussain [ EECS Gwangju Institute of Science and Technology Gwangju,South Korea ]
  • Suyeon Oh [ EECS Gwangju Institute of Science and Technology Gwangju,South Korea ]
  • Moongu Jeon [ EECS Gwangju Institute of Science and Technology Gwangju,South Korea ] Corresponding Author

참고문헌

자료제공 : 네이버학술정보

간행물 정보

발행기관

  • 발행기관명
    한국차세대컴퓨팅학회 [Korean Institute of Next Generation Computing]
  • 설립연도
    2005
  • 분야
    공학>컴퓨터학
  • 소개
    본 학회는 차세대 PC 및 그 관련분야의 학술활동을 통하여 차세대 PC의 학문 및 기술발전을 도모하고 산업발전 및 국제협력 증진을 목적으로 한다.

간행물

  • 간행물명
    한국차세대컴퓨팅학회 학술대회
  • 간기
    반년간
  • 수록기간
    2021~2025
  • 십진분류
    KDC 566 DDC 004

이 권호 내 다른 논문 / 한국차세대컴퓨팅학회 학술대회 2024 한국차세대컴퓨팅학회 춘계학술대회

    피인용수 : 0(자료제공 : 네이버학술정보)

    함께 이용한 논문 이 논문을 다운로드한 분들이 이용한 다른 논문입니다.

      페이지 저장