반자율주행 맥락에서 AI 에이전트의 멀티모달 인터랙션이 운전자 경험에 미치는 효과 = 시각적 캐릭터 유무를 중심으로

국문 초록 (Abstract)

대화형 AI 스피커가 보편화되면서 음성인식은 자율주행 상황에서의 중요한 차량-운전자 인터랙션 방식으로 인식되고 있다. 이 연구의 목적은 반자율주행 상황에서 음성뿐만 아니라 AI 캐릭터의 시각적 피드백을 함께 전달하는 멀티모달 인터랙션이 음성 단일 모드 인터랙션보다 사용자 경험 최적화에 효과적인지를 확인하는 것이다. 실험 참가자에게 주행 중 AI 스피커와 캐릭터를 통해 음악 선곡과 조정을 위한 인터랙션 태스크를 수행하게 하고, 정보 및 시스템 품질, 실재감, 지각된 유용성과 용이성, 그리고 지속 사용 의도를 측정하였다. 평균차이 분석 결과, 대부분의 사용자 경험 요인에서 시각적 캐릭터의 멀티모달 효과는 나타나지 않았으며, 지속사용 의도에서도 효과는 나타나지 않았다. 오히려, 정보품질 요인에서 음성 단일 모드가 멀티모달보다 효과적인 것으로 나타났다. 운전자의 인지적 노력이 필요한 반자율주행 단계에서는 멀티모달 인터랙션이 단일 모드 인터랙션에 비해 사용자 경험 최적화에 효과적이지 않았다.

다국어 초록 (Multilingual Abstract)

As the interactive AI speaker becomes popular, voice recognition is regarded as an important vehicle-driver interaction method in case of autonomous driving situation. The purpose of this study is to confirm whether multimodal interaction in which feedback is transmitted by auditory and visual mode of AI characters on screen is more effective in user experience optimization than auditory mode only. We performed the interaction tasks for the music selection and adjustment through the AI speaker while driving to the experiment participant and measured the information and system quality, presence, the perceived usefulness and ease of use, and the continuance intention. As a result of analysis, the multimodal effect of visual characters was not shown in most user experience factors, and the effect was not shown in the intention of continuous use. Rather, it was found that auditory single mode was more effective than multimodal in information quality factor. In the semi-autonomous driving stage, which requires driver s cognitive effort, multimodal interaction is not effective in optimizing user experience as compared to single mode interaction.

목차 (Table of Contents)

• 요약
• Abstract
• I. 서론
• II. 이론적 배경
• III. 연구 모델 및 조사설계
• IV. 연구 결과 및 분석
• V. 결론
• 참고문헌

참고문헌 (Reference)

1 김용일, "확장된 기술수용 모델을 적용한 스마트폰 외식정보서비스 사용자의 수용태도에 관한 연구" 한국호텔외식관광경영학회 23 (23): 275-289, 2014

2 김영환, "지각된 서비스 품질, 유용성, 용이성이 IPTV 사용자 만족 및 지속적 사용의도에 미치는 영향" 한국콘텐츠학회 9 (9): 314-327, 2009

3 한상도, "정보시스템 품질과 사용자 만족에 관한 연구" 2 (2): 78-86, 2001

4 이지인, "자율주행 자동차 환경에서의 운전자 경험에 대한 연구: 신뢰와 불신 형성 모형 중심으로" 한국디지털콘텐츠학회 18 (18): 713-722, 2017

5 박은영, "음성인식을 적용한 멀티미디어 콘텐츠 방안 - 교육용 유아영어 앱을 위한 사용자 인터페이스를 중심으로 -" 사단법인 한국브랜드디자인학회 11 (11): 111-120, 2013

6 이혜민, "음성인식 기반의 모바일 지능형 개인비서 서비스 사용성 비교 - Samsung S 보이스와 Apple 시리를 중심으로 -" 한국디지털디자인학회 14 (14): 231-240, 2014

7 최종우, "운전자 정보제공을 위한 모달별 인터페이스" 254-257, 2010

8 최종우, "운전자 정보제공을 위한 모달별 인터페이스" 254-257, 2010

9 홍은지, "스마트홈 대화형 인터페이스의 의인화 효과 : 음성-채팅 인터랙션 유형에 따른 실험 연구" 한국에이치씨아이학회 12 (12): 15-23, 2017

10 조윤주, "모바일 환경에서의 캐릭터 인텔리전트 에이전트에 대한 신뢰 형성 요인" 한국디지털디자인학회 8 (8): 83-98, 2008

11 장복만, "멀티모달 인터랙션 에이전트를 이용한 U-헬스케어 상황인식 보안 프레임워크" 보안공학연구지원센터 6 (6): 337-350, 2009

12 이동우, "멀티모달 사용자 인터페이스 기술 동향" 3 (3): 15-20, 2005

13 김현근, "다중 에이전트를 이용한캐릭터 기반 대화형 인공지능 설계" 75-79, 2017

14 주영주, "기업 사이버교육에서 인지적 실재감과 몰입, 만족도, 지속의향과의 구조적 관계" 한국교육정보미디어학회 15 (15): 21-38, 2009

15 손승혜, "기술수용모델을 이용한 초기 이용자들의스마트폰 채택 행동 연구" 한국언론학회 55 (55): 227-251, 2011

16 M. H. Cohen, "Voice user interface design" Addison-Wesley Professional 2004

17 J. Walker, "Using a Human Face in an Interface" 85-91, 1994

18 L. Deng, "User experience, satisfaction, and continual usage intention of IT" 19 (19): 60-75, 2010

19 F. D. Davis, "User acceptance of computer technology: a comparison of two theoretical models" 35 (35): 982-1003, 1989

20 R. Agarwal, "Time flies when you're having fun: Cognitive absorption and beliefs about information technology usage" 24 (24): 665-694, 2000

21 M. Jeon, "The effects of social interactions with in-vehicle agents on a driver's anger level, driving performance, situation awareness, and perceived workload" 50 : 185-199, 2015

22 최정주, "The Impact of Robot Appearance Types and Robot Behavior Types on People's Perception of a Robot" 한국디지털디자인학회 14 (14): 1-11, 2014

23 W. H. Delone, "The DeLone and McLean model of information systems success: a ten-year update" 19 (19): 9-30, 2003

24 V. Venkatesh, "Technology acceptance model 3 and a research agenda on interventions" 39 (39): 273-315, 2008

25 F. D. Davis, "Perceived usefulness, perceived ease of use, and user acceptance of information technology" 13 (13): 319-340, 1989

26 S. Oviatt, "Multimodal interactive maps:Designing for human performance" 12 (12): 93-129, 1997

27 R. A. Sánchez, "Motivational factors that influence the acceptance of Moodle using TAM" 26 (26): 1632-1640, 2010

28 B. Dumas, "Human machine interaction" 3-26, 2009

29 J. Cassell, "Embodied conversational interface agents" 43 (43): 70-78, 2000

30 J. Cassel, "Embodied Conversational Agents" MIT Press 1-27, 2000

31 Z. Yang, "Development and validation of an instrument to measure user perceived service quality of information presenting web portals" 42 (42): 575-589, 2005

32 남종훈, "DMB의 수용결정요인에 관한 연구:위성 DMB와 지상파 DMB의 비교를 중심으로" 한국지역언론학회 7 (7): 143-188, 2007

33 M. Peissner, "Can voice interaction help reducing the level of distraction and prevent accidents? Meta-study on driver distraction and voice interaction" Nuance Communications 2011

34 S. Okamoto, "Anthropomorphic AI Agent Mediated Multimodal Interactions in Vehicles" 110-114, 2017

35 L. Nigay, "A design space for multimodal systems: concurrent processing and data fusion" ACM 172-178, 1993

36 S. Macskassy, "A conversational agent" Rutgers University 1996

37 N. Yee, "A MetaAnalysis of the Impact of the Inclusion and Realism of Human-Like Faces on User Experiences in Interfaces" 1-10, 2007

38 한국콘텐츠진흥원, "2016 캐릭터 산업백서" 한국콘텐츠진흥원 2016