공간컴퓨팅이 가능한 Microsoft HoloLens 2와 생성형 인공지능을 결합하여, 지능형 가상 아바타를 통해 사용자와 실시간 상호작용하는 지능형 안내 시스템의 설계 방향을 제안한다. 사용자는 음성, 시 선, 제스처 등의 입력을 통해 질문하거나 대상에 대한 정보를 요청할 수 있으며, 아바타는 이를 인식 하고 자연어로 응답한다. 해당 시스템은 멀티모달 인터페이스, GPT 기반 질의응답, 아바타 시각화, 실 시간 피드백 및 행동 로그 저장 기능을 포함하며, 교육 및 산업 훈련 등 다양한 분야에서 몰입감 있는 안내 경험을 제공할 수 있다. 향후 사용자 실험을 통해 사용성과 효과성을 평가하고, 응답 정확도와 인터랙션 다양성을 향상시키는 방향으로 확장할 계획이다.
목차
요약 1. 서론 2. 관련 연구 3. 시스템 구성 3.1 시나리오 기반 시스템 구성 3.2 음성 정보 전달 방법 3.3 객체 인식 및 가상 아바타 시각화 방법 3.4 사용자 대화 이력 관리 및 행동 로그 3.5 성능 검증 4. 결론 Acknowledgement 참고문헌