This study explores the integration of generative AI with Unreal Engine's MetaHuman technology to create an advanced real-time digital human system. We analyze existing implementations combining these technologies, including Inworld AI's NPC system and NVIDIA's Avatar Cloud Engine, to inform our research. We propose a novel architecture that leverages MetaHuman's visual fidelity and generative AI's dynamic behavior. Our methodology covers character creation, AI model integration, and optimization for real-time performance. The system is evaluated based on rendering quality, AI response accuracy, and user experience. Results demonstrate the potential of this integration for creating more responsive and lifelike digital humans. We discuss implications for gaming, education, and virtual assistants, addressing current limitations and proposing future research directions. This study contributes to the field by providing a framework for combining advanced AI capabilities with state-of-the-art real-time rendering, advancing the development of intelligent virtual characters.
한국어
본 연구는 생성적 AI와 언리얼 엔진의 MetaHuman 기술을 통합하여 고급 실시간 디지털 휴먼 시스템을 구현하는 것을 탐구한다. Inworld AI의 NPC 시스템 및 NVIDIA의 Avatar Cloud Engine과 같은 기존 기술 통합 사례를 분석하여 연구에 참고하였으며, MetaHuman의 시각적 사실성과 생성적 AI의 동적 행동을 결합한 새로운 아키텍처를 제안한다. 연구 방법론은 캐릭터 제작, AI 모델 통합, 실시간 성능 최적화를 다루고 있다. 시스템은 렌더링 품질, AI 응답 정확 도, 사용자 경험을 기준으로 평가되었으며, 그 결과 이러한 통합이 보다 반응성 높고 사실적인 디지털 휴먼을 구현할 잠재력을 입증했다. 본 연구는 게임, 교육, 가상 비서 분야에서의 시사점 을 논의하고, 현재의 한계점과 향후 연구 방향을 제시한다. 이를 통해 첨단 AI 기능과 최첨단 실시간 렌더링을 결합한 프레임워크를 제공하여 지능형 가상 캐릭터 개발을 한 단계 발전시키 는 데 기여하고자 한다.
목차
ABSTRACT 1. Introduction 1.1 Digital Human Technology 1.2 MetaHuman and Generative AI 2. Related Study 2.1 Concept and Evolution of Digital Human Systems 2.2 Unreal Engine's MetaHuman Technology 2.3 Generative AI Technology 2.4 Real-Time Rendering Technology 3. Analysis of MetaHuman and Generative AI Integration Cases 3.1 Inworld AI's MetaHuman NPC System 3.2 NVIDIA ACE and MetaHuman Integration 3.3 AI Face Generator and MetaHuman Combination Techniques 4. Development 4.1 System Design and Architecture 4.2 MetaHuman Character Creation and Optimization 4.3 Generative AI Model Selection and Training 4.4 AI and MetaHuman Integration 4.5 Real-time Rendering and Performance Optimization 5. Conclusion Acknowledgement Reference <국문초록> <결론 및 향후 연구>
키워드
MetaHumanGenerative AIUnreal Engine
저자
Ok-Hue CHO [ 조옥희 | Department of Animation, College of Convergence Engineering, 20 Hongjimun 2-gil, Jongno-gu, Seoul, Korea ]
Hye Young YOO [ 유해영 | Department of Media Contents, Seowon University, 377-3, Musimseo-ro, Seowon-gu, Cheongju-si, Chungcheongbuk-do, Korea ]
Corresponding Author
1. 게임산업을 활성화 하고,
2. 게임기술과 기술 인력을 양산할 수 있도록 교육기관의 교과과정을 개발하고,
3. 관련기술에 대한 연구발표회, 강연회, 강습회 등을 개최하며,
4. 학회지, 논문지 및 관련 문헌을 발간하고,
5. 게임 기술 개발을 위한 국제화, 표준화 등을 지원하고,
6. 산.학.연.관이 협동할 수 있는 국제적 학술교류 및 협력을 지원하고,
7. 회원 상호간의 공동 이익과 친목을 증진시킨다.
간행물
간행물명
컴퓨터게임및콘텐츠논문지(구 한국컴퓨터게임학회논문지) [Journal of Computer Games and Contents]
간기
월간
pISSN
3091-7409
eISSN
3092-3638
수록기간
2002~2026
등재여부
KCI 등재
십진분류
KDC 691DDC 793
이 권호 내 다른 논문 / 컴퓨터게임및콘텐츠논문지(구 한국컴퓨터게임학회논문지) 제37권 제4호