연구배경 : 최근 인공지능의 발전과 함께 음성처리 기술 시장이 성장하면서, 스마트 스피커를 비롯한 자동차, 가전제품 등 다양한 제품 분야에서 음성 에이전트가 활용되고 있다. 이러한 추세에 맞춰 음성 플랫폼 기업과 관련 학계에서는 음성 에이전트 제품의 사용자 경험을 설계하는 데 활용 가능한 가이드들을 제안하고 있다. 또한, 음성 명령에 익숙해진 사용자들이 에이전트에게 사람과 같은 인터랙션 경험을 기대하게 되면서 디자이너는 명령 수행을 위한 대화 설계를 넘어서 언어적, 비언어적 커뮤니케이션이 통합적으로 고려된 인터랙션을 설계하는 역량을 요구받고 있다. 이에 본 연구는 디자이너가 음성 에이전트 제품의 인터랙션 디자인을 수행할 때 효과적으로 아이데이션을 도와줄 수 있는 아이디어 가시화 툴을 제안하고자 한다.
연구방법 : 먼저 선행연구 고찰과 사용자 인터뷰를 통해 음성 에이전트 제품에 대한 사용자 인식과 기대를 파악하였으며, 이를 바탕으로 음성 에이전트와 사용자 간 인터랙션 설계를 위해 제시된 기존 방법들의 제한점을 도출하였다. 이어서 음성 에이전트 제품의 인터랙션 아이디어를 효과적으로 표현하기 위한 가시화 프레임워크 및 이를 적용한 툴을 제안한다.
연구결과 : 본 연구는 사용자 조사 및 문헌 조사를 통해 음성 에이전트 제품의 멀티 모달리티를 고려한 통합적 인터랙션 설계 필요성을 강조한다. 이를 위한 방안으로서 아이데이션 단계에서 음성 에이전트 제품의 언어적, 비언어적 커뮤니케이션을 통합적으로 고려할 수 있는 가시화 프레임워크와 이를 디자인 과정에 반영하기 위한 툴을 제안하였다. 또한 툴 적용 사례를 함께 제시하여 연구결과의 이해도와 활용도를 높이고자 하였다.
결론 : 본 연구에서 제안한 인터랙션 디자인 아이디어 가시화 툴은 음성 에이전트 제품의 발전 흐름에 맞추어 멀티 모달리티 요소들 간의 일체감 있는 인터랙션 아이디어를 표현하는 방법의 토대를 마련할 수 있을 것이다. 또한 음성 에이전트 제품의 인터랙션을 설계하는 디자인 교육 및 실무 프로젝트에서 아이디어를 구체화하는 도구로서 활용될 수 있을 것으로 기대한다.
Background : With the recent development of artificial intelligence and the growth of the voice processing technology market, voice agents are being used in various products such as smart speakers, automobiles, and home appliances. In line with this trend, voice platform companies and related academia have been proposing guidelines that can be used to design the user experience of voice agent products. In addition, as users become familiar with voice commands and expect human-like interaction from voice agents, designers are required to design interactions with integrated verbal and nonverbal communication beyond dialogue design for command performance. The purpose of this study is to propose tools to help designers effectively visualize ideas when designing interactions of voice agent products.
Methods : First, through the literature reviews and user interviews, we investigated users’ perception and expectation of the interaction with voice agent products. Based on the results, we also identified limitations of existing methods for designing interactions between users and voice agents. We then proposed a framework and tools for describing and developing interaction ideas of voice agent products.
Result : Based on the user research and prior research reviews, this research emphasizes an integrated approach to designing multi-modal interactions for voice agent products. This paper proposes a conceptual framework and applicable tools that enable designers to effectively visualize interaction design ideas of voice agent products. integrating verbal and nonverbal communication. Examples are also presented to enhance the understanding and applicability of the tools in design practice.
Conclusion : The interaction idea visualization tool proposed in this study will be able to lay the foundation for methods to represent integrated interaction ideas among multi-modal elements along with advance of voice agent products. It is also expected that the tools can be used to develop ideas of voice agent products in design education and practice.