SlideShare a Scribd company logo
1 of 15
Download to read offline
Learnability through Adaptive
Discovery Tools in Voice User
Interfaces
+ CHI2017
- Anushay Furqan et al.
/고영인
x 2017 May 12th
2
Anushay Furqan
Research Assistant
Digital Media Drexel University
Chelsea Myers
Graduate researcher
Digital Media Drexel University
Jichen Zhu
Assistant Professor
Digital Media Drexel University
Digital Media, Antoinette Westphal College of Media Arts & Design; Courtesy joint appointment
with Department of Computer Science, College of Computing & Informatics
Authors
3
Work in progress 논문으로,
연구 배경과 연구의 이론적 토대를 중심으로 발제
4
• VUI에 익숙하지 않은 초보 사용자(novice user)는 VUI를 활용하여 어떤 일을 할 수 있는지
(What can I do?), 그 일을 하기 위해 어떤 음성 입력(Command)를 해야하는지 알지 못함
• 하지만, VUI는 시각적으로 표현되지 않기 때문에 VUI의 특징만으로는 큐(cue)를 제공하기
어려움
Summary
연구 배경
5
Summary
연구 방향
• 이러한 Learnability issue를 극복하기위해 일종의 tutorial을 Graphic으로 제공하는 방법을
제안. 특히, 달력 앱을 이 방법에 따라 디자인하고, 퍼소나를 통해 활용방안을 제안 함.
6
저자의 키워드:
Voice User Interface; Learnability; Discoverability; Adaptive Interface
CHI 키워드:
Information Interfaces and presentation; Miscellaneous; User Interfaces: Voice I/O
Keywords
7
Keywords
• Learnability (학습 용이성)
초보 사용자가 사전 훈련 없이 시스템을 효과적으로 사용할 수 있는 방법을 익히는 능력
1. Initial learnability
초보 사용자가 첫 태스크를 수행하는 능력
2. Extended learnability
사용자가 전체 사용기간 동안 태스크를 잘 수행하거나, 수행 실력이 향상되는 능력
• Discoverability
학습 용의성을 성취하는 것
discoverability가 제대로 이루어지지 않으면, 학습용의성의 좋지 못함
• Adaptive Interface
사용자 혹은 사용환경 등에 따라 조정되는 인터페이스
8
• VUI를 이용해 스마트폰, TV, 자동차와 interaction이 가능
해 짐
• 하지만, 98% 사용자가 siri를 테스트해보고 그 중 70%가
때때로 혹은 가끔 siri를 사용한다 응답
• VUI 사용 방법을 학습할 수 있도록 하여 지속적 사용이 가
능하게 하려 함
Introduction
9
Introduction
• 음성으로 컨트롤하는 달력 앱, DiscoverCal, 의 Visual adaptive discovery tool(ADT)를 디자인
하는 것을 목표로 함
• 사용자가 아직 알지 못하는 activity와 command에 대해 가이드를 제공하여, VUI의 학습 용의
성을 높이려 함
• The goal of ADT is to provide users with contextually relevant help during interactions,
and to adapt with improved user performance, in order to learn to use the system to
maximum productivity.
연구 목표
10
Learnability & Discoverability
• 초보 사용자들은 새로운 시스템을 사용하는 방법을 익혀 그 시스템의 capability와 limitation
을 이해하기 때문에 중요
Related Work
11
• 사용자가 원할 때 정보를 검색할 수 있도록 하는 방법
• 사용자는 interface에 대한 mental model을 점진적으로
개발할 수 있음
• 대부분의 연구들이 이 방법을 사용하고 있음
Related Work
• 초기 사용 이상으로 학습을 확장시키기 위해 사용자의
요구에 따라 인터페이스를 조정(Adapting)하는 방법
Learn As You Go Approach
Adaptive Approach
two approaches for improving learnability in VUIs
12
Related Work
• 인터페이스의 조정은 trigger를 기반으로 이루어짐
• trigger: 사용자 응답 시간(user response times)과 hastiness 등
• VUI의 재생 속도 혹은 입력하는 명령어를 수정하는데 사용 됨
• adapted feedback이 사용자의 능력에 맞게 제대로 작동할 경우, 인터랙션이 빨라지고
사용자의 만족도가 증가 함
• Some patterns applied in adaptive graphical user interfaces can be extended to
the design of adt, such as reducing visualizations of elements that are not
necessary beyond initial use. other patterns include adaptin content and
prompts to frequency of use
Adaptive Approach cont.
13
Related Work
• In most instances, adaptation with VUIs has been triggered by th quality of a user’s
speech. Using response time as a trigger can be risky as a novice users interruptions
or hesitations may not be proportionate to their skill. research suggests that captive
interfaces should not give users a sense of reduced control.
• Few studies focused on an adaptive approach.
• in this study, extend learnability by adapting to be contextually relevant and to a
user's performance with the interface.
Adaptive Approach cont.
14
Designing for Discoverability in VUI
discoverability를 위해 VUI를 디자인 할 때, activities(사용자가 성취하려고 하는 것) 과
command(사용자가 태스크를 수행하기 위해 입력하는 말)을 쉽게 discoverable할 수 있게 하는
것이 중요
Characteristics identified from existing projects and corresponding Discovery tools for DiscoverCal
utilized visual assistance to improve discoverability in VUIs and categorized the key design elements in them.
Characteristics Tools in DiscoverCal
visualizing what can be done “What can I Do?” menu
Visualizing what can be said list of commands for what can be done
visualizing new discoveries discovery prompts
Contextual relevance adapting content+vicuals
15
Discussion Point
• Trigger가 될 수 있는 것이 사용자의 응답 지연 시간 말고 뭐가 있을까? VUI사용시 측정
할 수 있는 다른 feature들은 무엇인가?
• Solution의 적절성 - VUI의 learnability 한계를 graphic으로 해결하는 것이 최선일까?

More Related Content

Similar to Learnability through adaptive discovery tools in voice user interfaces

[BSD]DISCOVERy
[BSD]DISCOVERy[BSD]DISCOVERy
[BSD]DISCOVERyJY LEE
 
Getting User's Attention in Web Apps in Likable, Minimally Annoying Ways
Getting User's Attention in Web Apps in Likable, Minimally Annoying WaysGetting User's Attention in Web Apps in Likable, Minimally Annoying Ways
Getting User's Attention in Web Apps in Likable, Minimally Annoying WaysHyesoo Yoo
 
[Imr2014]week04
[Imr2014]week04[Imr2014]week04
[Imr2014]week04JY LEE
 
User interface design: 10 researchers' general UI/UX design principles
User interface design: 10 researchers' general UI/UX design principlesUser interface design: 10 researchers' general UI/UX design principles
User interface design: 10 researchers' general UI/UX design principleslynnific
 
이러닝 교수 설계 업그레이드 전략[
이러닝 교수 설계 업그레이드 전략[이러닝 교수 설계 업그레이드 전략[
이러닝 교수 설계 업그레이드 전략[guest917038
 
RightBrain 기업 UX 교육 소개
RightBrain 기업 UX 교육 소개RightBrain 기업 UX 교육 소개
RightBrain 기업 UX 교육 소개RightBrain inc.
 
2015 hi first 스터디 최종보고서
2015 hi first 스터디 최종보고서2015 hi first 스터디 최종보고서
2015 hi first 스터디 최종보고서Seongho Park
 
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유Nts Nuli
 
프로젝트 관리 심화 과정소개서
프로젝트 관리 심화 과정소개서프로젝트 관리 심화 과정소개서
프로젝트 관리 심화 과정소개서Dong-Hwan Han, Ph.D.
 
Bigcamp in sxs_wedu
Bigcamp in sxs_weduBigcamp in sxs_wedu
Bigcamp in sxs_weduJudyoon
 
스마트러닝기술
스마트러닝기술스마트러닝기술
스마트러닝기술uEngine Solutions
 
INNOIZ_UX_YuriLee
INNOIZ_UX_YuriLeeINNOIZ_UX_YuriLee
INNOIZ_UX_YuriLeeYu-Ri Lee
 
(주) 쿠 퍼실리테이션 그룹 교육 프로그램 향상 제안
(주) 쿠 퍼실리테이션 그룹   교육 프로그램 향상 제안(주) 쿠 퍼실리테이션 그룹   교육 프로그램 향상 제안
(주) 쿠 퍼실리테이션 그룹 교육 프로그램 향상 제안Myung
 
2015 HCI - Smart TV General Guidelines
2015 HCI - Smart TV General Guidelines2015 HCI - Smart TV General Guidelines
2015 HCI - Smart TV General GuidelinesDonghoo Kim
 
20171120 tech day-11th-소프트웨어 테스팅2-서현용
20171120 tech day-11th-소프트웨어 테스팅2-서현용20171120 tech day-11th-소프트웨어 테스팅2-서현용
20171120 tech day-11th-소프트웨어 테스팅2-서현용ymtech
 
Ux research guide
Ux research guideUx research guide
Ux research guideKim Taesook
 
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants "Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants 박 상아
 
나는 PM이다! 이재왕 발표자료
나는 PM이다! 이재왕 발표자료나는 PM이다! 이재왕 발표자료
나는 PM이다! 이재왕 발표자료Dong-Hwan Han, Ph.D.
 

Similar to Learnability through adaptive discovery tools in voice user interfaces (20)

[BSD]DISCOVERy
[BSD]DISCOVERy[BSD]DISCOVERy
[BSD]DISCOVERy
 
Getting User's Attention in Web Apps in Likable, Minimally Annoying Ways
Getting User's Attention in Web Apps in Likable, Minimally Annoying WaysGetting User's Attention in Web Apps in Likable, Minimally Annoying Ways
Getting User's Attention in Web Apps in Likable, Minimally Annoying Ways
 
[Imr2014]week04
[Imr2014]week04[Imr2014]week04
[Imr2014]week04
 
Khan Academy
Khan AcademyKhan Academy
Khan Academy
 
User interface design: 10 researchers' general UI/UX design principles
User interface design: 10 researchers' general UI/UX design principlesUser interface design: 10 researchers' general UI/UX design principles
User interface design: 10 researchers' general UI/UX design principles
 
이러닝 교수 설계 업그레이드 전략[
이러닝 교수 설계 업그레이드 전략[이러닝 교수 설계 업그레이드 전략[
이러닝 교수 설계 업그레이드 전략[
 
RightBrain 기업 UX 교육 소개
RightBrain 기업 UX 교육 소개RightBrain 기업 UX 교육 소개
RightBrain 기업 UX 교육 소개
 
2015 hi first 스터디 최종보고서
2015 hi first 스터디 최종보고서2015 hi first 스터디 최종보고서
2015 hi first 스터디 최종보고서
 
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유
[2014널리세미나] 접근성과 사용성, 기획자가 챙겨야 하는 이유
 
프로젝트 관리 심화 과정소개서
프로젝트 관리 심화 과정소개서프로젝트 관리 심화 과정소개서
프로젝트 관리 심화 과정소개서
 
Bigcamp in sxs_wedu
Bigcamp in sxs_weduBigcamp in sxs_wedu
Bigcamp in sxs_wedu
 
스마트러닝기술
스마트러닝기술스마트러닝기술
스마트러닝기술
 
INNOIZ_UX_YuriLee
INNOIZ_UX_YuriLeeINNOIZ_UX_YuriLee
INNOIZ_UX_YuriLee
 
(주) 쿠 퍼실리테이션 그룹 교육 프로그램 향상 제안
(주) 쿠 퍼실리테이션 그룹   교육 프로그램 향상 제안(주) 쿠 퍼실리테이션 그룹   교육 프로그램 향상 제안
(주) 쿠 퍼실리테이션 그룹 교육 프로그램 향상 제안
 
2015 HCI - Smart TV General Guidelines
2015 HCI - Smart TV General Guidelines2015 HCI - Smart TV General Guidelines
2015 HCI - Smart TV General Guidelines
 
20171120 tech day-11th-소프트웨어 테스팅2-서현용
20171120 tech day-11th-소프트웨어 테스팅2-서현용20171120 tech day-11th-소프트웨어 테스팅2-서현용
20171120 tech day-11th-소프트웨어 테스팅2-서현용
 
Ux research guide
Ux research guideUx research guide
Ux research guide
 
Fedevtalk 15 jds
Fedevtalk 15 jdsFedevtalk 15 jds
Fedevtalk 15 jds
 
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants "Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants
"Hi! I am the Crowd Tasker" Crowdsourcing through Digital Voice Assistants
 
나는 PM이다! 이재왕 발표자료
나는 PM이다! 이재왕 발표자료나는 PM이다! 이재왕 발표자료
나는 PM이다! 이재왕 발표자료
 

Recently uploaded

Merge (Kitworks Team Study 이성수 발표자료 240426)
Merge (Kitworks Team Study 이성수 발표자료 240426)Merge (Kitworks Team Study 이성수 발표자료 240426)
Merge (Kitworks Team Study 이성수 발표자료 240426)Wonjun Hwang
 
MOODv2 : Masked Image Modeling for Out-of-Distribution Detection
MOODv2 : Masked Image Modeling for Out-of-Distribution DetectionMOODv2 : Masked Image Modeling for Out-of-Distribution Detection
MOODv2 : Masked Image Modeling for Out-of-Distribution DetectionKim Daeun
 
캐드앤그래픽스 2024년 5월호 목차
캐드앤그래픽스 2024년 5월호 목차캐드앤그래픽스 2024년 5월호 목차
캐드앤그래픽스 2024년 5월호 목차캐드앤그래픽스
 
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...Continual Active Learning for Efficient Adaptation of Machine LearningModels ...
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...Kim Daeun
 
Console API (Kitworks Team Study 백혜인 발표자료)
Console API (Kitworks Team Study 백혜인 발표자료)Console API (Kitworks Team Study 백혜인 발표자료)
Console API (Kitworks Team Study 백혜인 발표자료)Wonjun Hwang
 
A future that integrates LLMs and LAMs (Symposium)
A future that integrates LLMs and LAMs (Symposium)A future that integrates LLMs and LAMs (Symposium)
A future that integrates LLMs and LAMs (Symposium)Tae Young Lee
 

Recently uploaded (6)

Merge (Kitworks Team Study 이성수 발표자료 240426)
Merge (Kitworks Team Study 이성수 발표자료 240426)Merge (Kitworks Team Study 이성수 발표자료 240426)
Merge (Kitworks Team Study 이성수 발표자료 240426)
 
MOODv2 : Masked Image Modeling for Out-of-Distribution Detection
MOODv2 : Masked Image Modeling for Out-of-Distribution DetectionMOODv2 : Masked Image Modeling for Out-of-Distribution Detection
MOODv2 : Masked Image Modeling for Out-of-Distribution Detection
 
캐드앤그래픽스 2024년 5월호 목차
캐드앤그래픽스 2024년 5월호 목차캐드앤그래픽스 2024년 5월호 목차
캐드앤그래픽스 2024년 5월호 목차
 
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...Continual Active Learning for Efficient Adaptation of Machine LearningModels ...
Continual Active Learning for Efficient Adaptation of Machine LearningModels ...
 
Console API (Kitworks Team Study 백혜인 발표자료)
Console API (Kitworks Team Study 백혜인 발표자료)Console API (Kitworks Team Study 백혜인 발표자료)
Console API (Kitworks Team Study 백혜인 발표자료)
 
A future that integrates LLMs and LAMs (Symposium)
A future that integrates LLMs and LAMs (Symposium)A future that integrates LLMs and LAMs (Symposium)
A future that integrates LLMs and LAMs (Symposium)
 

Learnability through adaptive discovery tools in voice user interfaces

  • 1. Learnability through Adaptive Discovery Tools in Voice User Interfaces + CHI2017 - Anushay Furqan et al. /고영인 x 2017 May 12th
  • 2. 2 Anushay Furqan Research Assistant Digital Media Drexel University Chelsea Myers Graduate researcher Digital Media Drexel University Jichen Zhu Assistant Professor Digital Media Drexel University Digital Media, Antoinette Westphal College of Media Arts & Design; Courtesy joint appointment with Department of Computer Science, College of Computing & Informatics Authors
  • 3. 3 Work in progress 논문으로, 연구 배경과 연구의 이론적 토대를 중심으로 발제
  • 4. 4 • VUI에 익숙하지 않은 초보 사용자(novice user)는 VUI를 활용하여 어떤 일을 할 수 있는지 (What can I do?), 그 일을 하기 위해 어떤 음성 입력(Command)를 해야하는지 알지 못함 • 하지만, VUI는 시각적으로 표현되지 않기 때문에 VUI의 특징만으로는 큐(cue)를 제공하기 어려움 Summary 연구 배경
  • 5. 5 Summary 연구 방향 • 이러한 Learnability issue를 극복하기위해 일종의 tutorial을 Graphic으로 제공하는 방법을 제안. 특히, 달력 앱을 이 방법에 따라 디자인하고, 퍼소나를 통해 활용방안을 제안 함.
  • 6. 6 저자의 키워드: Voice User Interface; Learnability; Discoverability; Adaptive Interface CHI 키워드: Information Interfaces and presentation; Miscellaneous; User Interfaces: Voice I/O Keywords
  • 7. 7 Keywords • Learnability (학습 용이성) 초보 사용자가 사전 훈련 없이 시스템을 효과적으로 사용할 수 있는 방법을 익히는 능력 1. Initial learnability 초보 사용자가 첫 태스크를 수행하는 능력 2. Extended learnability 사용자가 전체 사용기간 동안 태스크를 잘 수행하거나, 수행 실력이 향상되는 능력 • Discoverability 학습 용의성을 성취하는 것 discoverability가 제대로 이루어지지 않으면, 학습용의성의 좋지 못함 • Adaptive Interface 사용자 혹은 사용환경 등에 따라 조정되는 인터페이스
  • 8. 8 • VUI를 이용해 스마트폰, TV, 자동차와 interaction이 가능 해 짐 • 하지만, 98% 사용자가 siri를 테스트해보고 그 중 70%가 때때로 혹은 가끔 siri를 사용한다 응답 • VUI 사용 방법을 학습할 수 있도록 하여 지속적 사용이 가 능하게 하려 함 Introduction
  • 9. 9 Introduction • 음성으로 컨트롤하는 달력 앱, DiscoverCal, 의 Visual adaptive discovery tool(ADT)를 디자인 하는 것을 목표로 함 • 사용자가 아직 알지 못하는 activity와 command에 대해 가이드를 제공하여, VUI의 학습 용의 성을 높이려 함 • The goal of ADT is to provide users with contextually relevant help during interactions, and to adapt with improved user performance, in order to learn to use the system to maximum productivity. 연구 목표
  • 10. 10 Learnability & Discoverability • 초보 사용자들은 새로운 시스템을 사용하는 방법을 익혀 그 시스템의 capability와 limitation 을 이해하기 때문에 중요 Related Work
  • 11. 11 • 사용자가 원할 때 정보를 검색할 수 있도록 하는 방법 • 사용자는 interface에 대한 mental model을 점진적으로 개발할 수 있음 • 대부분의 연구들이 이 방법을 사용하고 있음 Related Work • 초기 사용 이상으로 학습을 확장시키기 위해 사용자의 요구에 따라 인터페이스를 조정(Adapting)하는 방법 Learn As You Go Approach Adaptive Approach two approaches for improving learnability in VUIs
  • 12. 12 Related Work • 인터페이스의 조정은 trigger를 기반으로 이루어짐 • trigger: 사용자 응답 시간(user response times)과 hastiness 등 • VUI의 재생 속도 혹은 입력하는 명령어를 수정하는데 사용 됨 • adapted feedback이 사용자의 능력에 맞게 제대로 작동할 경우, 인터랙션이 빨라지고 사용자의 만족도가 증가 함 • Some patterns applied in adaptive graphical user interfaces can be extended to the design of adt, such as reducing visualizations of elements that are not necessary beyond initial use. other patterns include adaptin content and prompts to frequency of use Adaptive Approach cont.
  • 13. 13 Related Work • In most instances, adaptation with VUIs has been triggered by th quality of a user’s speech. Using response time as a trigger can be risky as a novice users interruptions or hesitations may not be proportionate to their skill. research suggests that captive interfaces should not give users a sense of reduced control. • Few studies focused on an adaptive approach. • in this study, extend learnability by adapting to be contextually relevant and to a user's performance with the interface. Adaptive Approach cont.
  • 14. 14 Designing for Discoverability in VUI discoverability를 위해 VUI를 디자인 할 때, activities(사용자가 성취하려고 하는 것) 과 command(사용자가 태스크를 수행하기 위해 입력하는 말)을 쉽게 discoverable할 수 있게 하는 것이 중요 Characteristics identified from existing projects and corresponding Discovery tools for DiscoverCal utilized visual assistance to improve discoverability in VUIs and categorized the key design elements in them. Characteristics Tools in DiscoverCal visualizing what can be done “What can I Do?” menu Visualizing what can be said list of commands for what can be done visualizing new discoveries discovery prompts Contextual relevance adapting content+vicuals
  • 15. 15 Discussion Point • Trigger가 될 수 있는 것이 사용자의 응답 지연 시간 말고 뭐가 있을까? VUI사용시 측정 할 수 있는 다른 feature들은 무엇인가? • Solution의 적절성 - VUI의 learnability 한계를 graphic으로 해결하는 것이 최선일까?