자아형 대형언어모델과 초저지연 멀티모달 상호작용 기반의 실감형 스마트관광 안내 프로토타입 구현 -제주 특화 메타휴먼 ‘윤슬’을 중심으로- = Implementation of an Immersive Smart Tourism Guidance Prototype Based on an Ego-type LLM and Ultra-Low Latency Multimodal Interaction -Focusing on the Jeju-specific Meta-human ‘Yoonseul’-

국문 초록 (Abstract)

본 연구는 기존 제주 스마트관광 안내 시스템이 가진 단방향 정보 전달의 한계와 상호작용 시 발생하는 응답 지연 시간(Latency)의 문제를 극복하고, 관광객과 능동적으로 교감할 수 있는 실감형 큐레이션 매체를 제안하고자 자아형 대형언어모델(LLM) 기반의 멀티모달(Multimodal) 상호작용 프로토타입 ‘윤슬’을 기획 및 구현하였다. ‘윤슬’은 빛에 비치어 반짝이는 잔물결을 뜻하는 순우리말로, 본 연구는 이러한 제주의 청정 자연 요소를 모티브로 캐릭터의 시각적 정체성을 도출하였다. 특히 생성형 인공지능을 활용하여 초기 시안을 도출하고 디자인 전공 대학생 80여 명의 선호도 투표를 거쳐 3차원 캐릭터의 최종 외형을 확정하는 객관적인 디자인 방법론을 적용하였다. 또한, 캐릭터의 고유한 자아(Ego)를 제주에 거주하는 발랄한 고등학생으로 설정하여 무거운 역사적 해설을 지양하고, 도민 맛집 및 최신 인기 명소 등 관광객의 실질적 수요가 높은 실용적인 맞춤형 정보를 제공하도록 자아형 대형언어모델을 제어하였다. 이를 시각, 청각, 촉각을 아우르는 멀티모달 입력 장치 및 실시간 3차원 렌더링 엔진과 초저지연(Ultra-Low Latency) 환경으로 연동함으로써, 대화의 흐름이 끊기지 않는 상호작용 파이프라인을 완성하였다. 산업디자인학과 학생 20명을 대상으로 한 실제 사용자 경험(UX) 평가 결과, 체감 반응 속도(4.85점/5점)와 전체적인 체험 몰입도(4.72점/5점)에서 높은 수치를 기록하여 프로토타입의 실효성을 객관적으로 입증하였다. 본 연구는 가상 캐릭터의 단순 수용성을 묻는 기존 연구에서 벗어나, 대중적 검증을 거친 지역 특화 자아를 기획하고 이를 자아형 대형언어모델 중심의 초저지연 기술 파이프라인으로 구현해 낸 융복합 디자인 실증 사례로서 학술적, 실무적 의의를 지닌다.

다국어 초록 (Multilingual Abstract)

This study proposes an immersive curation platform designed to overcome the limitations of unidirectional information delivery and response latency inherent in existing Jeju smart tourism guidance systems. To foster active engagement with tourists, we developed 'Yoonseul,' a multimodal interactive prototype powered by an ego-type Large Language Model (LLM). The name 'Yoonseul' is a native Korean word referring to sparkling ripples reflecting light, and the character's visual identity was inspired by these pristine natural elements of Jeju. We established an objective design methodology by utilizing generative AI to derive initial concepts and determining the character’s final 3D appearance through a preference vote among approximately 80 university students majoring in design. Furthermore, we defined the character’s ego as a cheerful high school student residing in Jeju, engineering the LLM to provide practical, high-demand information—such as local dining favorites and trendy photo spots—rather than dense historical facts. By seamlessly integrating multimodal input devices (visual, auditory, and tactile) with a real-time 3D rendering engine to achieve ultra-low latency, we ensured an uninterrupted conversation flow. An empirical evaluation involving 20 industrial design students confirmed the prototype’s effectiveness, yielding high scores in immersion (4.72/5) and response speed (4.85/5). This study departs from conventional research on virtual character acceptability and offers significant academic and practical value as a case of interdisciplinary design that implements a publicly verified, region-specific ego through an ultra-low latency technology pipeline.