손인식과 추적을 통해 실감콘텐츠 무선 제어를 위한 사용자 인터렉션 시스템 구현
Implementation of a User Interaction System for Wireless Control of Realistic Content through Hand Recognition and Tracking
Augmented reality, virtual reality, and holograms, which are representative of realistic content application technologies, are technologies that are increasingly highlighted in the 5G era, and the related industry scale is also rapidly expanding. However, the utilization of holographic realistic content is currently a static and fixed expression method in exhibition halls and museums, or is used by attaching expensive hardware. Therefore, this study aims to develop a system that enables active and interactive holographic realistic content. To this end, we use the hand recognition technology of MediaPipe, a machine learning framework. Based on this, we develop a linkage technology that enables linkage and control between hand recognition and holographic realistic content, and a user interaction technology that enables interactive content rotation up/down/left/right and zooming in/out according to the shape and movement of the hand. Through the results of this study, it is possible to experience dynamic realistic content control at a static display level by grafting interactive technology onto realistic content such as museums and exhibition halls.
한국어
실감콘텐츠 적용기술로 대표되는 증강현실, 가상현실 및 홀로그램 등은 5G 시대를 맞이하여 더욱 부각되 고 있는 기술이며, 관련 산업 규모도 빠르게 확대되고 있다. 그러나 홀로그램 실감콘텐츠 활용은 전시관 및 박물 관 등에서 정적이면서 고정된 표현 방법이거나 고비용의 하드웨어를 부착하여 이용하는 실정이다. 이에 본 연구에 서는 홀로그램 실감콘텐츠를 능동적이면서 상호작용이 가능한 시스템을 개발하고자 한다. 이를 위해서 머신러닝 프레임워크인 미디어파이프(mediaPipe)의 손인식 기술을 이용한다. 이를 바탕으로 손인식과 홀로그램 실감콘텐츠 와 연계 및 제어가 가능하도록 연동 기술개발과 손의 형태와 움직임에 따라 콘텐츠가 상/하/좌/우 회전과 확대/축 소가 가능하도록 상호작용이 가능한 사용자 인터렉션 기술을 개발한다. 본 연구 결과를 통해 박물관 및 전시관 등 실감콘텐츠에 상호작용 기술을 접목함으로써 정적인 디스플레이 수준을 동적으로 실감콘텐츠 제어가 가능한 체험이 가능하다.
목차
요약 Abstract Ⅰ. 서론 Ⅱ. 관련 연구 2.1 홀로그램 기술 이해 2.2 홀로그램 활용 사례 2.3 손모양 제스처 인식 Ⅲ. 손인식을 통한 실감콘텐츠 제어 3.1 시스템 구성 3.2 손 인식과 동작 Ⅳ. 실감콘텐츠 응용제어기술 구현 Ⅴ. 결론 REFERENCES
키워드
머신러닝손모양실감콘텐츠인터렉션무선 제어Machine learningHand shapeImmersive contentInteractionWireless control
저자
이상원 [ Sang-Won Lee | 원광대학교 컴퓨터소프트웨어공학과 교수 ]
이현창 [ Hyun-Chang Lee | 원광대학교 게임콘텐츠학과 교수 ]
Corresponding Author
Ever since next generation convergence technology became one of the most important industries in the nation, computing professionals have encountered a growing number of challenges. Along with scholars and colleagues in related fields, they have gathered in avariety of forums and meetings over the last few decades to share their knowledge, experiences and the outcome of their research. These exchanges have led to the founding of the International Next-generation Convergence technology (INCA) on December 1, 2015. INCA was registered as an incorporated association under the Ministry of Information and Communications. The main purpose of the organization is to improve our society by achieving the highest capability possible in next generation convergence technology.
간행물
간행물명
차세대융합기술학회논문지 [The Journal of Next-generation Convergence Technology Association]