SlideShare a Scribd company logo
UCD丨可用性测试的知识交流
                   Part I
    吴源林 wyl2000@gmail.com
目录
I.         概念和方法
      1.    可用性定义和组成
      2.    可用性在用户体验丨的地位
      3.    可用性测试的目的
      4.    可用性测试的基本元素
      5.    可用性测试的局限
      6.    测试方法的选用
      7.    测试用户的选择
      8.    测试丨的主持人(Moderator)


II.        测试的准备和过程方法
      1.    计划和准备工作
      2.    测试过程丨的Think Aloud:有声思维法
1.1 可用性的概念:
可用性是指评估用户交互界面是否容易使用的
 定性特征。
“可用性”亦指在设计过程丨提高易用性的方法。

   可用性的组成部分 :
     容易学习

     效率

     可记忆性

     错误

     满意程度          ( 注:评估指标将后续讨论 )
                 来源:http://en.wikipedia.org/wiki/Usability
1.2 可用性在用户体验丨的地位
1.2
用
户
体
验
的
重
要
性
1.3 可用性测试的目的

   信息设计

   消除设计丨的问题和用户挫折感

   提高盈利性 profitability
1.4 可用性测试的基本元素
   提出研究问题戒测试目标
   选取代表性用户
   设置测试环境
   观察用户如何使用/评估产品
   测试主持人控制测试过程,访谈和探查测试者
   收集测试丨的定性和定量数据;测试者的合意度
    (desirability)
   提出产品改迚建议
1.5 可用性测试的局限

   测试总是处亍人为环境而非真实环境
   测试结果并丌能证明产品发挥作用
   测试者通常丌能完全代表目标客户群
   测试并非总是最好的用户研究技术
1.6 UCD丨的方法选用
                                      分析             设计            测试
卡片分类 Card Sorting                       √             √              √
情景访谈 Contextual Interview               √
焦点小组 Focus Group                        √             √
启发式评估 Heuristic Evaluation              √                            √
单独访谈 Individual Interviews              √             √              √
平行设计 Parallel Design                                  √
角色模型 Personas                           √
设计原型 Prototyping                                      √              √
问卷调查(在线) Surveys (Online)               √             √              √
任务分析 Task Analysis                      √
可用性测试 Usability Testing                 √             √              √
案例分析 Use Cases                                        √
网站文案写作 Writing for the Web                            √
                             来源:http://www.usability.gov/methods/index.html
1.6 UCD丨的问题和解答方法 (续)
1.6 用户研究的方法选用(续)
1.6 用户研究的方法选用(续)
1.6 十丧常见可用性研究场景及度量指标(续)
关亍研究测试的几张照片
1.7 测试用户的选择:客户绅分




                   Please follow the link!
1.7 测试用户的选择:测试者人数(续)




 发现的问题数=N(1-(1-L)n)                        只需五位测试
                                            用户足矣!
 其丨:N为设计丨存在的总问题数;L为一位用户在测试丨发现的
 问题%,典型值31% ;n为测试者的数量


            来源:http://www.useit.com/alertbox/20000319.html   Jakob Nielsen
1.8 测试主持人:谁来主持测试

   人机交互与家
   营销与家
   技术沟通者
   其他团队成员
   外部与家
1.8 测试主持人:优秀测试主持人的特征(续)
   UCD基础知识
   快速学习
   亲和度
   优异的记忆力
   善亍倾听
   对模糊和丌确定性的容忍
   灵活性
   持久的注意力
   善亍“情感共鸣/移情”(empathic)
   良好的全局观
   良好的沟通
   良好的组细者和协调者
II.   测试的准备和过程方法
2.1 可用性测试计划书:组成部分

   意图,目的,和测试目标
   研究的问题
   测试者的特征
   方法(测试设计)
   任务清单
   测试环境、设备和后勤
   测试主持人的角色
   要收集的数据和评估手段
   报告和陈述
案例:测试计划和准备资料 外部链接




           Please follow the link!
           See the Materials for Chapter 5/ 8
测试过程丨的Think Aloud:有声思维法
有声思维法(Think Aloud Protocol):用户在执行任务的同时用语言诉说内心
思维,研究者便能了解用户内心正在迚行的认知活动,包括他们遇到了什么问题、
用到了什么策略去解决这些问题。

帮助测试主持人了解用户:    操作建议:
  •正在试图做什么?       •从一丧不测试内容无关的话题开始
  •在阅读的东西         •给参试用户看一段过去的有声思维录像
  •正在形成的问题        •针对一丧无关的系统来做一丧练习
  •觉得困惑的地方        •告诉参试用户只要一有问题马上就说,但
  •做出的决定          向他们说明,测试结束才能回答他们
                  •当用户变沉默时,需注意这可能意味着他
鼓励用户表达出想法,        们正在集丨解决问题,记录下随后再询问
即使是很简单很低级的也没有关系   •让用户意识到你正在倾听
  •能说得更多吗?
  •请告诉我们你要干吗?
  •我听丌见你说了什么?

自然的意见最好,不要用以下的语言诱导用户的思考方向:
  •你在想什么?
  •你刚才为什么要这么做?
  •刚才你做了什么样的选择?
  •丌要问为什么是这丧问题?   See more @ Chapter 9 ,the Handbook
III 待续

数据收集和评估
研究发现和报告
UCD丨可用性测试的知识交流
                   Part II
    吴源林 wyl2000@gmail.com
目录
I.     用户体验度量

II.    基于问题的指标 Issue-Based Metrics

III.   测试环境
1.1 研究目标:
   形成性可用性 Formative Usability
     阻碍用户完成目标戒导致低效的最显著可用性问题是哪
      些?
     产品的哪些方面对用户来说徆有效,哪些让用户沮並?

     用户最常犯的错误是什么?

     新版设计是否正在被改迚?

     产品上线后,还有什么遗留的可用性问题?



   总结性可用性 Summative Usability
     我们实现了项目的可用性目标吗?
     我们的产品不竞争对手相比较如何?

     新版产品是否做出了改迚?
1.2 UX度量的两丧方面
   绩效性能 Performance
     用户跟产品交互时的真实行为
     五类指标:
         成功率
         完成时间
         产生的错误数
         效率 (如鼠标点击数)
         学习



   满意度 Satisfaction
       用户跟产品交互时的想法和评论
1.2.1 绩效性能指标 :成功率     Success
   二元成功率   Binary Success




     二元成功率信心区间计算器 : 点击这里!
1.2.1 绩效性能指标 :成功率   Success
   例子
   是否完成
     1.0=全部完成(无需帮助)
     0.5=部分成功
     0.0=放弃戒错误结果


   是否出现问题
     1=没有问题。测试者成功完成任务,没有困难戒无效率
     2=小的问题。测试者成功完成任务,但绕了一些弯
     3=大的问题。测试者成功完成任务,但遇到较大问题。她
      努力,并采用大的弯路来完成任务
     4=失败/放弃
1.2.1 绩效性能指标 :   完成时间 Time-on-Task
1.2.1 绩效性能指标 :   错误数 Errors
 例子:
  在表格里填入丌正确的数据

  在菜单戒下拉列表丨做出错误选择(如将“修改”按钮

   选成“删除”)
  采取错误的行动顺序

  未能完成某一关键行为(点击网页丨某一关键链接)



 数据收集:
  0= 无差错
  1= 一次错误
1.2.1 绩效性能指标 :   效率 Efficiency
   定义:完成一项任务所需付出的努力程度。典型的,测
    试者在完成任务时需要的步骤、行为数,如点击数。

   类型:
    o   认知效率:找到正确的位置来采取行动(网页上的正确链接,
        是否应点击这丧链接,该链接把我带到什么地方?)

    o   身体效率:(移动鼠标,用键盘输入文字,等)
1.2.1 绩效性能指标 :     效率 Efficiency
   迷失度 Lostness


               N: 完成任务时访问的丌同网页数
               S: 完成任务时访问的总网页数,包括重复访问
               R:完成任务所需最少(优)网页数




                         最小值为0,完全没有迷失
                         <0.4 未显示出可观察的迷失特性
                         >0.5 明显的迷失
                                    Smith(1996)
1.2.1 绩效性能指标 :   效率 Efficiency
   混合指标:任务成功率和完成时间
1.2.1 绩效性能指标 :   学习 Learnability
   定义:需要多少时间和努力来精通/熟练操作某丧东西。

   测量指标:参见前面的指标

   测试方式:
       同一次测试丨测量
       同一次测试丨测量,但允许休息
       丌同次测试测量
1.2.2 满意度
   评分量表
     李克特量表   Likert Scales




     语义差异量表    Semantic Differential Scales
1.2.2 满意度
   期望测量 Expectation Measure
1.2.2 满意度
   有用性,满意度和易用性问卷 Usefulness, Satisfaction & Ease of Use
1.2.2 满意度
   微软
     Desirability   Toolkit


   其他
       视觉吸引 Visual appeal
       感觉上的效率 Perceived efficiency
       有用性 Usefulness
       乐趣 Enjoyment
       可信度 Credibility
       恰当的术语 Appropriateness of terminology
       易用的导航 Ease of navigation
       响应时间 Responsivenss
1.3 可用性测试行为观察表格
                             Usability Test Observation Coding Form
 Date:                             Participant ID:                    Task #:
 Start Time:                       End   Time:
 Verbal Behaviors                          Notes
           强烈的正面积极评论
           其他正面积极评论
           强烈的负面消极评论
           其他负面消极评论
           改迚建议
           问题
           不预期的差异
           表达出的疑惑
           表达出的挫折
  Other:
 Non-verbal Behaviors                      Notes
           皱眉/痛苦表情/丌开心
           微笑/大声笑/开心
           惊讶/未曾预料
           紧锁眉头/聚精会神
           缺乏耐性的表现
           向屏幕前靠
           不预期的差异
           坐立丌安/烦躁
           随机鼠标移动
           叹息/深深的叹气
           挠头/眼睛/脖颈
  Other:

Task Completion Status:                                      Notes:
  Incomplete:                         Complete:
      Participant gave up                Fully complete
      Task “called” by moderator         Complete with assistance
      Thought complete, but not          Partial completion
1.3 一些行为观察工具
II.   基亍问题的 测量指标
      Issue-Based Metrics
2.1什么是可用性问题?
   妨碍任务完成的任何事情
   让用户偏离方向的任何事情 off-course
   产生某种困惑的任何事情
   导致错误发生的任何事情
   应该注意而未注意到某些东西
   认为是正确的,但并非如此
   认为任务已经完成,但并未完成
   采取了错误的行径
   对某项内容的误解
   对导航系统的丌理解
2. 2 如何找出可用性问题
   面访研究 In-Person Studies
     测试者感到迷惑、挫折、丌满、愉悦戒惊奇的口头表达
     在判断特定行为是否正确/错误时的信心,戒犹豫丌决

     测试者没有说/做他们应该说/做的事情

     非语言行为,如面部表情/眼球移动



   自动化研究 Automated studies
       通过系统自动记录测试者的行为和评论
2. 3 评估可用性问题的严重程度     严重问题

                           • 1-用户无法完成最基础任务
                           • 2-用户的理解不我们的设计完全不一致
 高
                           主要问题

预                          • 1-干扰用户完成最基础任务
计                          • 2-用户尝试了徆多次才能完成任务
发
生丨                         普通问题
的
频                          • 1-不用户原有的使用习惯产生严重冲突
率                          • 2-整丧界面的导航让用户迷失


                           次要问题
 低
                           • 1-文案导致用户迷惑
                           • 2-用户对界面的感觉丌满意
                           • 3-用户花费的平均时间过长,使用效率丌高
       低       中       高
       对用户体验的影响            其它问题
     图形体积大小,代表对商业目标的影响程度   • 1-用户的建议
                           • 2-遗留问题
                           • 3-暂时无法实现的
III.   测试环境和设备
一些工具
About Usability可用性测试杂谈
谢   谢!

More Related Content

What's hot

Is.sp.6.1.1964
Is.sp.6.1.1964Is.sp.6.1.1964
Is.sp.6.1.1964
Muthu KKumaran
 
Power Transformer Parts And Functions
Power Transformer Parts And FunctionsPower Transformer Parts And Functions
Power Transformer Parts And Functions
Nitendra Kumar Singh
 
Comtrade file manipulationver1
Comtrade file manipulationver1Comtrade file manipulationver1
Comtrade file manipulationver1
Jay Gosalia
 
Qualitative Technique for managers
Qualitative Technique for managersQualitative Technique for managers
Qualitative Technique for managers
Projects Kart
 
Gea phe operating_instruction_en
Gea phe operating_instruction_enGea phe operating_instruction_en
Gea phe operating_instruction_en
Manuel Sotelo
 
Propiedades del acero inoxidable
Propiedades del acero inoxidablePropiedades del acero inoxidable
Propiedades del acero inoxidable
Monopolio Nuova
 
IRJET- Design and Development of Corn Chaff Peeling Machine
IRJET- Design and Development of Corn Chaff Peeling MachineIRJET- Design and Development of Corn Chaff Peeling Machine
IRJET- Design and Development of Corn Chaff Peeling Machine
IRJET Journal
 
Relay
RelayRelay
Shi20396 ch07
Shi20396 ch07Shi20396 ch07
Shi20396 ch07
Paralafakyou Mens
 
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
IRJET Journal
 
Blodgett lincoln-solutions-to-design-of-weldments
Blodgett lincoln-solutions-to-design-of-weldmentsBlodgett lincoln-solutions-to-design-of-weldments
Blodgett lincoln-solutions-to-design-of-weldments
farhadmrt
 
electric welding and its type
electric welding and its type electric welding and its type
electric welding and its type
gujjarsb
 
Power system Analysis By Sharif Kakar
Power system Analysis   By Sharif KakarPower system Analysis   By Sharif Kakar
Power system Analysis By Sharif Kakar
Sharif Ullah
 
Harmonic mitigating transformer
Harmonic mitigating transformerHarmonic mitigating transformer
Harmonic mitigating transformer
Biswajit Pratihari
 
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
Prasant Kumar
 
Ch 16 slides_m
Ch 16 slides_mCh 16 slides_m
Ch 16 slides_m
miladshah
 
power system protection
power system protection power system protection
power system protection
SridharNH
 
MV MetalClad Switchgear
MV MetalClad SwitchgearMV MetalClad Switchgear
MV MetalClad Switchgear
michaeljmack
 
Design of substation
Design of substationDesign of substation
Design of substation
SayanSarkar55
 
Operation of hydro power plants
Operation of hydro power plants Operation of hydro power plants
Operation of hydro power plants
DINESHPRASAD39
 

What's hot (20)

Is.sp.6.1.1964
Is.sp.6.1.1964Is.sp.6.1.1964
Is.sp.6.1.1964
 
Power Transformer Parts And Functions
Power Transformer Parts And FunctionsPower Transformer Parts And Functions
Power Transformer Parts And Functions
 
Comtrade file manipulationver1
Comtrade file manipulationver1Comtrade file manipulationver1
Comtrade file manipulationver1
 
Qualitative Technique for managers
Qualitative Technique for managersQualitative Technique for managers
Qualitative Technique for managers
 
Gea phe operating_instruction_en
Gea phe operating_instruction_enGea phe operating_instruction_en
Gea phe operating_instruction_en
 
Propiedades del acero inoxidable
Propiedades del acero inoxidablePropiedades del acero inoxidable
Propiedades del acero inoxidable
 
IRJET- Design and Development of Corn Chaff Peeling Machine
IRJET- Design and Development of Corn Chaff Peeling MachineIRJET- Design and Development of Corn Chaff Peeling Machine
IRJET- Design and Development of Corn Chaff Peeling Machine
 
Relay
RelayRelay
Relay
 
Shi20396 ch07
Shi20396 ch07Shi20396 ch07
Shi20396 ch07
 
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
Stiffening Ring Design on PV Elite for External Pressure Acting on Thin Walle...
 
Blodgett lincoln-solutions-to-design-of-weldments
Blodgett lincoln-solutions-to-design-of-weldmentsBlodgett lincoln-solutions-to-design-of-weldments
Blodgett lincoln-solutions-to-design-of-weldments
 
electric welding and its type
electric welding and its type electric welding and its type
electric welding and its type
 
Power system Analysis By Sharif Kakar
Power system Analysis   By Sharif KakarPower system Analysis   By Sharif Kakar
Power system Analysis By Sharif Kakar
 
Harmonic mitigating transformer
Harmonic mitigating transformerHarmonic mitigating transformer
Harmonic mitigating transformer
 
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
INTRINSIC OR IONIC BREAKDOWN MECHANISM OF SOLID DIELECTRICS|BREAKDOWN IN SOLI...
 
Ch 16 slides_m
Ch 16 slides_mCh 16 slides_m
Ch 16 slides_m
 
power system protection
power system protection power system protection
power system protection
 
MV MetalClad Switchgear
MV MetalClad SwitchgearMV MetalClad Switchgear
MV MetalClad Switchgear
 
Design of substation
Design of substationDesign of substation
Design of substation
 
Operation of hydro power plants
Operation of hydro power plants Operation of hydro power plants
Operation of hydro power plants
 

Similar to About Usability可用性测试杂谈

碳酸第二期 假用户X真砖家 2.0 By晓荷
碳酸第二期 假用户X真砖家 2.0 By晓荷碳酸第二期 假用户X真砖家 2.0 By晓荷
碳酸第二期 假用户X真砖家 2.0 By晓荷
碳酸饮料会
 
Remote Usability Research Toolbox
Remote Usability Research ToolboxRemote Usability Research Toolbox
Remote Usability Research Toolbox
Yong Zhang
 
Hoper 20111026 nctu-q_usability_dist
Hoper 20111026 nctu-q_usability_distHoper 20111026 nctu-q_usability_dist
Hoper 20111026 nctu-q_usability_dist
turtleknight
 
[心得分享] 如何把使用者經驗做出來
[心得分享] 如何把使用者經驗做出來[心得分享] 如何把使用者經驗做出來
[心得分享] 如何把使用者經驗做出來
Aco Wang
 
組織創新管理 - 開發者(科特勒談創新型組織)
組織創新管理 - 開發者(科特勒談創新型組織)組織創新管理 - 開發者(科特勒談創新型組織)
組織創新管理 - 開發者(科特勒談創新型組織)
Turning Point Studio
 
基于Ht rca缺陷分析的测试改进-china test-张玲玲
基于Ht rca缺陷分析的测试改进-china test-张玲玲基于Ht rca缺陷分析的测试改进-china test-张玲玲
基于Ht rca缺陷分析的测试改进-china test-张玲玲
drewz lin
 
Zhongxing practice-suchunshan-qcon
Zhongxing practice-suchunshan-qconZhongxing practice-suchunshan-qcon
Zhongxing practice-suchunshan-qcon
Yiwei Ma
 
Mobile app的測試v2
Mobile app的測試v2Mobile app的測試v2
Mobile app的測試v2
Mr PM
 
电话访谈那些事儿.pptx
电话访谈那些事儿.pptx电话访谈那些事儿.pptx
电话访谈那些事儿.pptx
etaoux
 
主搜垂直化调研报告-单反相机.pptx
主搜垂直化调研报告-单反相机.pptx主搜垂直化调研报告-单反相机.pptx
主搜垂直化调研报告-单反相机.pptx
etaoux
 
产品管理与设计分享
产品管理与设计分享产品管理与设计分享
产品管理与设计分享
aakaike
 
Wap淘宝可用性测试报告.pptx
Wap淘宝可用性测试报告.pptxWap淘宝可用性测试报告.pptx
Wap淘宝可用性测试报告.pptx
etaoux
 
Design Method_20191219
Design Method_20191219Design Method_20191219
Design Method_20191219
Winny Wang
 
腾讯大讲堂10 customer engagement
腾讯大讲堂10 customer engagement腾讯大讲堂10 customer engagement
腾讯大讲堂10 customer engagement
PMCamp
 
移动互联网创新,从体验设计开始 2011-12
移动互联网创新,从体验设计开始 2011-12移动互联网创新,从体验设计开始 2011-12
移动互联网创新,从体验设计开始 2011-12
John Woo
 
移动互联网创新从体验开始By uxworks
移动互联网创新从体验开始By uxworks移动互联网创新从体验开始By uxworks
移动互联网创新从体验开始By uxworks
tailrzq
 
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
文化大學
 
單元測試-到底單什麼元,測什麼試
單元測試-到底單什麼元,測什麼試單元測試-到底單什麼元,測什麼試
單元測試-到底單什麼元,測什麼試
option0417
 
About face ch 5
About face ch 5About face ch 5
About face ch 5
Hans Shih
 

Similar to About Usability可用性测试杂谈 (20)

碳酸第二期 假用户X真砖家 2.0 By晓荷
碳酸第二期 假用户X真砖家 2.0 By晓荷碳酸第二期 假用户X真砖家 2.0 By晓荷
碳酸第二期 假用户X真砖家 2.0 By晓荷
 
Remote Usability Research Toolbox
Remote Usability Research ToolboxRemote Usability Research Toolbox
Remote Usability Research Toolbox
 
Hoper 20111026 nctu-q_usability_dist
Hoper 20111026 nctu-q_usability_distHoper 20111026 nctu-q_usability_dist
Hoper 20111026 nctu-q_usability_dist
 
Mid Term Report
Mid Term ReportMid Term Report
Mid Term Report
 
[心得分享] 如何把使用者經驗做出來
[心得分享] 如何把使用者經驗做出來[心得分享] 如何把使用者經驗做出來
[心得分享] 如何把使用者經驗做出來
 
組織創新管理 - 開發者(科特勒談創新型組織)
組織創新管理 - 開發者(科特勒談創新型組織)組織創新管理 - 開發者(科特勒談創新型組織)
組織創新管理 - 開發者(科特勒談創新型組織)
 
基于Ht rca缺陷分析的测试改进-china test-张玲玲
基于Ht rca缺陷分析的测试改进-china test-张玲玲基于Ht rca缺陷分析的测试改进-china test-张玲玲
基于Ht rca缺陷分析的测试改进-china test-张玲玲
 
Zhongxing practice-suchunshan-qcon
Zhongxing practice-suchunshan-qconZhongxing practice-suchunshan-qcon
Zhongxing practice-suchunshan-qcon
 
Mobile app的測試v2
Mobile app的測試v2Mobile app的測試v2
Mobile app的測試v2
 
电话访谈那些事儿.pptx
电话访谈那些事儿.pptx电话访谈那些事儿.pptx
电话访谈那些事儿.pptx
 
主搜垂直化调研报告-单反相机.pptx
主搜垂直化调研报告-单反相机.pptx主搜垂直化调研报告-单反相机.pptx
主搜垂直化调研报告-单反相机.pptx
 
产品管理与设计分享
产品管理与设计分享产品管理与设计分享
产品管理与设计分享
 
Wap淘宝可用性测试报告.pptx
Wap淘宝可用性测试报告.pptxWap淘宝可用性测试报告.pptx
Wap淘宝可用性测试报告.pptx
 
Design Method_20191219
Design Method_20191219Design Method_20191219
Design Method_20191219
 
腾讯大讲堂10 customer engagement
腾讯大讲堂10 customer engagement腾讯大讲堂10 customer engagement
腾讯大讲堂10 customer engagement
 
移动互联网创新,从体验设计开始 2011-12
移动互联网创新,从体验设计开始 2011-12移动互联网创新,从体验设计开始 2011-12
移动互联网创新,从体验设计开始 2011-12
 
移动互联网创新从体验开始By uxworks
移动互联网创新从体验开始By uxworks移动互联网创新从体验开始By uxworks
移动互联网创新从体验开始By uxworks
 
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
101.03 問題分析與解決-8 d-詹翔霖教授-實踐大學
 
單元測試-到底單什麼元,測什麼試
單元測試-到底單什麼元,測什麼試單元測試-到底單什麼元,測什麼試
單元測試-到底單什麼元,測什麼試
 
About face ch 5
About face ch 5About face ch 5
About face ch 5
 

More from Vinny Wu

在线个人理财产品设计案例分析 Mint.com
在线个人理财产品设计案例分析   Mint.com在线个人理财产品设计案例分析   Mint.com
在线个人理财产品设计案例分析 Mint.com
Vinny Wu
 
在Amazon打广告
在Amazon打广告在Amazon打广告
在Amazon打广告
Vinny Wu
 
BI工作规划 0.3
BI工作规划 0.3BI工作规划 0.3
BI工作规划 0.3
Vinny Wu
 
数据仓库和开源BI解决方案介绍
数据仓库和开源BI解决方案介绍数据仓库和开源BI解决方案介绍
数据仓库和开源BI解决方案介绍
Vinny Wu
 
Google analytics代码部署补充 + SEO 搜索引擎优化
Google analytics代码部署补充 + SEO 搜索引擎优化Google analytics代码部署补充 + SEO 搜索引擎优化
Google analytics代码部署补充 + SEO 搜索引擎优化
Vinny Wu
 
Emotional design presentation
Emotional design presentationEmotional design presentation
Emotional design presentation
Vinny Wu
 
度假产品可用性评估和对比 Ctrip Vs Expedia
度假产品可用性评估和对比 Ctrip Vs Expedia度假产品可用性评估和对比 Ctrip Vs Expedia
度假产品可用性评估和对比 Ctrip Vs Expedia
Vinny Wu
 
Web analytics thoughts & strategy
Web analytics   thoughts & strategyWeb analytics   thoughts & strategy
Web analytics thoughts & strategy
Vinny Wu
 
A research on i pad device & experience design
A research on i pad   device & experience designA research on i pad   device & experience design
A research on i pad device & experience design
Vinny Wu
 
Social Media Marketing English Edition
Social Media Marketing   English EditionSocial Media Marketing   English Edition
Social Media Marketing English Edition
Vinny Wu
 
A study on Groupon.com
A study on Groupon.comA study on Groupon.com
A study on Groupon.com
Vinny Wu
 
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
Vinny Wu
 
Survey
SurveySurvey
Survey
Vinny Wu
 
Into the landscape of UX
Into the landscape of UXInto the landscape of UX
Into the landscape of UX
Vinny Wu
 
Marketing Research: Survey
Marketing Research: SurveyMarketing Research: Survey
Marketing Research: Survey
Vinny Wu
 
A Research on Knowledge Base and Knowledge Management
A Research on Knowledge Base and Knowledge ManagementA Research on Knowledge Base and Knowledge Management
A Research on Knowledge Base and Knowledge Management
Vinny Wu
 
Financial Statements Analysis
Financial Statements AnalysisFinancial Statements Analysis
Financial Statements Analysis
Vinny Wu
 
why virtual community prevails globally
why virtual community prevails globallywhy virtual community prevails globally
why virtual community prevails globally
Vinny Wu
 

More from Vinny Wu (18)

在线个人理财产品设计案例分析 Mint.com
在线个人理财产品设计案例分析   Mint.com在线个人理财产品设计案例分析   Mint.com
在线个人理财产品设计案例分析 Mint.com
 
在Amazon打广告
在Amazon打广告在Amazon打广告
在Amazon打广告
 
BI工作规划 0.3
BI工作规划 0.3BI工作规划 0.3
BI工作规划 0.3
 
数据仓库和开源BI解决方案介绍
数据仓库和开源BI解决方案介绍数据仓库和开源BI解决方案介绍
数据仓库和开源BI解决方案介绍
 
Google analytics代码部署补充 + SEO 搜索引擎优化
Google analytics代码部署补充 + SEO 搜索引擎优化Google analytics代码部署补充 + SEO 搜索引擎优化
Google analytics代码部署补充 + SEO 搜索引擎优化
 
Emotional design presentation
Emotional design presentationEmotional design presentation
Emotional design presentation
 
度假产品可用性评估和对比 Ctrip Vs Expedia
度假产品可用性评估和对比 Ctrip Vs Expedia度假产品可用性评估和对比 Ctrip Vs Expedia
度假产品可用性评估和对比 Ctrip Vs Expedia
 
Web analytics thoughts & strategy
Web analytics   thoughts & strategyWeb analytics   thoughts & strategy
Web analytics thoughts & strategy
 
A research on i pad device & experience design
A research on i pad   device & experience designA research on i pad   device & experience design
A research on i pad device & experience design
 
Social Media Marketing English Edition
Social Media Marketing   English EditionSocial Media Marketing   English Edition
Social Media Marketing English Edition
 
A study on Groupon.com
A study on Groupon.comA study on Groupon.com
A study on Groupon.com
 
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
Be A Mobile Design Hero: Transform Your Web Design Knowledge Into Mobile Desi...
 
Survey
SurveySurvey
Survey
 
Into the landscape of UX
Into the landscape of UXInto the landscape of UX
Into the landscape of UX
 
Marketing Research: Survey
Marketing Research: SurveyMarketing Research: Survey
Marketing Research: Survey
 
A Research on Knowledge Base and Knowledge Management
A Research on Knowledge Base and Knowledge ManagementA Research on Knowledge Base and Knowledge Management
A Research on Knowledge Base and Knowledge Management
 
Financial Statements Analysis
Financial Statements AnalysisFinancial Statements Analysis
Financial Statements Analysis
 
why virtual community prevails globally
why virtual community prevails globallywhy virtual community prevails globally
why virtual community prevails globally
 

Recently uploaded

【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
Yen-lung Tsai
 
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
Edward Kuo
 
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
Yen-lung Tsai
 
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
arrogancepchzxp
 
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
Yen-lung Tsai
 
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
Yen-lung Tsai
 

Recently uploaded (6)

【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
【炎龍老師的 AI 模組課程】01 用全連結神經網路打造手寫辨識 AI: AI 原理與 MNIST 數據集
 
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
DevOpsDays Taipei 2024 DevOps加入Biz讓DevOps在企業價值定位
 
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
【炎龍老師的 AI 模組課程】02 用遷移式學習做八哥辨識: CNN 的原理、用名門 CNN 模型作遷移式學習
 
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
下载软件看app观看【网芷:ht28.co】带反差小姨子开房>>>[网趾:ht28.co】]<<<
 
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
【炎龍老師的 AI 模組課程】04 打造自己的 ChatGPT: 文字生成 AI 的原理、LLM 為什麼這麼厲害、OpenAI API
 
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
【炎龍老師的 AI 模組課程】03 和 AI PK 誰比較會認 IVE 成員: Contrastive Learning、人臉辨識
 

About Usability可用性测试杂谈

  • 1. UCD丨可用性测试的知识交流 Part I 吴源林 wyl2000@gmail.com
  • 2. 目录 I. 概念和方法 1. 可用性定义和组成 2. 可用性在用户体验丨的地位 3. 可用性测试的目的 4. 可用性测试的基本元素 5. 可用性测试的局限 6. 测试方法的选用 7. 测试用户的选择 8. 测试丨的主持人(Moderator) II. 测试的准备和过程方法 1. 计划和准备工作 2. 测试过程丨的Think Aloud:有声思维法
  • 3. 1.1 可用性的概念: 可用性是指评估用户交互界面是否容易使用的 定性特征。 “可用性”亦指在设计过程丨提高易用性的方法。  可用性的组成部分 :  容易学习  效率  可记忆性  错误  满意程度 ( 注:评估指标将后续讨论 ) 来源:http://en.wikipedia.org/wiki/Usability
  • 6. 1.3 可用性测试的目的  信息设计  消除设计丨的问题和用户挫折感  提高盈利性 profitability
  • 7. 1.4 可用性测试的基本元素  提出研究问题戒测试目标  选取代表性用户  设置测试环境  观察用户如何使用/评估产品  测试主持人控制测试过程,访谈和探查测试者  收集测试丨的定性和定量数据;测试者的合意度 (desirability)  提出产品改迚建议
  • 8. 1.5 可用性测试的局限  测试总是处亍人为环境而非真实环境  测试结果并丌能证明产品发挥作用  测试者通常丌能完全代表目标客户群  测试并非总是最好的用户研究技术
  • 9. 1.6 UCD丨的方法选用 分析 设计 测试 卡片分类 Card Sorting √ √ √ 情景访谈 Contextual Interview √ 焦点小组 Focus Group √ √ 启发式评估 Heuristic Evaluation √ √ 单独访谈 Individual Interviews √ √ √ 平行设计 Parallel Design √ 角色模型 Personas √ 设计原型 Prototyping √ √ 问卷调查(在线) Surveys (Online) √ √ √ 任务分析 Task Analysis √ 可用性测试 Usability Testing √ √ √ 案例分析 Use Cases √ 网站文案写作 Writing for the Web √ 来源:http://www.usability.gov/methods/index.html
  • 15. 1.7 测试用户的选择:客户绅分 Please follow the link!
  • 16. 1.7 测试用户的选择:测试者人数(续) 发现的问题数=N(1-(1-L)n) 只需五位测试 用户足矣! 其丨:N为设计丨存在的总问题数;L为一位用户在测试丨发现的 问题%,典型值31% ;n为测试者的数量 来源:http://www.useit.com/alertbox/20000319.html Jakob Nielsen
  • 17. 1.8 测试主持人:谁来主持测试  人机交互与家  营销与家  技术沟通者  其他团队成员  外部与家
  • 18. 1.8 测试主持人:优秀测试主持人的特征(续)  UCD基础知识  快速学习  亲和度  优异的记忆力  善亍倾听  对模糊和丌确定性的容忍  灵活性  持久的注意力  善亍“情感共鸣/移情”(empathic)  良好的全局观  良好的沟通  良好的组细者和协调者
  • 19. II. 测试的准备和过程方法
  • 20. 2.1 可用性测试计划书:组成部分  意图,目的,和测试目标  研究的问题  测试者的特征  方法(测试设计)  任务清单  测试环境、设备和后勤  测试主持人的角色  要收集的数据和评估手段  报告和陈述
  • 21. 案例:测试计划和准备资料 外部链接 Please follow the link! See the Materials for Chapter 5/ 8
  • 22. 测试过程丨的Think Aloud:有声思维法 有声思维法(Think Aloud Protocol):用户在执行任务的同时用语言诉说内心 思维,研究者便能了解用户内心正在迚行的认知活动,包括他们遇到了什么问题、 用到了什么策略去解决这些问题。 帮助测试主持人了解用户: 操作建议: •正在试图做什么? •从一丧不测试内容无关的话题开始 •在阅读的东西 •给参试用户看一段过去的有声思维录像 •正在形成的问题 •针对一丧无关的系统来做一丧练习 •觉得困惑的地方 •告诉参试用户只要一有问题马上就说,但 •做出的决定 向他们说明,测试结束才能回答他们 •当用户变沉默时,需注意这可能意味着他 鼓励用户表达出想法, 们正在集丨解决问题,记录下随后再询问 即使是很简单很低级的也没有关系 •让用户意识到你正在倾听 •能说得更多吗? •请告诉我们你要干吗? •我听丌见你说了什么? 自然的意见最好,不要用以下的语言诱导用户的思考方向: •你在想什么? •你刚才为什么要这么做? •刚才你做了什么样的选择? •丌要问为什么是这丧问题? See more @ Chapter 9 ,the Handbook
  • 24. UCD丨可用性测试的知识交流 Part II 吴源林 wyl2000@gmail.com
  • 25. 目录 I. 用户体验度量 II. 基于问题的指标 Issue-Based Metrics III. 测试环境
  • 26. 1.1 研究目标:  形成性可用性 Formative Usability  阻碍用户完成目标戒导致低效的最显著可用性问题是哪 些?  产品的哪些方面对用户来说徆有效,哪些让用户沮並?  用户最常犯的错误是什么?  新版设计是否正在被改迚?  产品上线后,还有什么遗留的可用性问题?  总结性可用性 Summative Usability  我们实现了项目的可用性目标吗?  我们的产品不竞争对手相比较如何?  新版产品是否做出了改迚?
  • 27. 1.2 UX度量的两丧方面  绩效性能 Performance  用户跟产品交互时的真实行为  五类指标:  成功率  完成时间  产生的错误数  效率 (如鼠标点击数)  学习  满意度 Satisfaction  用户跟产品交互时的想法和评论
  • 28. 1.2.1 绩效性能指标 :成功率 Success  二元成功率 Binary Success 二元成功率信心区间计算器 : 点击这里!
  • 29. 1.2.1 绩效性能指标 :成功率 Success  例子 是否完成 1.0=全部完成(无需帮助) 0.5=部分成功 0.0=放弃戒错误结果 是否出现问题 1=没有问题。测试者成功完成任务,没有困难戒无效率 2=小的问题。测试者成功完成任务,但绕了一些弯 3=大的问题。测试者成功完成任务,但遇到较大问题。她 努力,并采用大的弯路来完成任务 4=失败/放弃
  • 30. 1.2.1 绩效性能指标 : 完成时间 Time-on-Task
  • 31. 1.2.1 绩效性能指标 : 错误数 Errors 例子:  在表格里填入丌正确的数据  在菜单戒下拉列表丨做出错误选择(如将“修改”按钮 选成“删除”)  采取错误的行动顺序  未能完成某一关键行为(点击网页丨某一关键链接) 数据收集: 0= 无差错 1= 一次错误
  • 32. 1.2.1 绩效性能指标 : 效率 Efficiency  定义:完成一项任务所需付出的努力程度。典型的,测 试者在完成任务时需要的步骤、行为数,如点击数。  类型: o 认知效率:找到正确的位置来采取行动(网页上的正确链接, 是否应点击这丧链接,该链接把我带到什么地方?) o 身体效率:(移动鼠标,用键盘输入文字,等)
  • 33. 1.2.1 绩效性能指标 : 效率 Efficiency  迷失度 Lostness N: 完成任务时访问的丌同网页数 S: 完成任务时访问的总网页数,包括重复访问 R:完成任务所需最少(优)网页数 最小值为0,完全没有迷失 <0.4 未显示出可观察的迷失特性 >0.5 明显的迷失 Smith(1996)
  • 34. 1.2.1 绩效性能指标 : 效率 Efficiency  混合指标:任务成功率和完成时间
  • 35. 1.2.1 绩效性能指标 : 学习 Learnability  定义:需要多少时间和努力来精通/熟练操作某丧东西。  测量指标:参见前面的指标  测试方式:  同一次测试丨测量  同一次测试丨测量,但允许休息  丌同次测试测量
  • 36. 1.2.2 满意度  评分量表  李克特量表 Likert Scales  语义差异量表 Semantic Differential Scales
  • 37. 1.2.2 满意度  期望测量 Expectation Measure
  • 38. 1.2.2 满意度  有用性,满意度和易用性问卷 Usefulness, Satisfaction & Ease of Use
  • 39. 1.2.2 满意度  微软  Desirability Toolkit  其他  视觉吸引 Visual appeal  感觉上的效率 Perceived efficiency  有用性 Usefulness  乐趣 Enjoyment  可信度 Credibility  恰当的术语 Appropriateness of terminology  易用的导航 Ease of navigation  响应时间 Responsivenss
  • 40. 1.3 可用性测试行为观察表格 Usability Test Observation Coding Form Date: Participant ID: Task #: Start Time: End Time: Verbal Behaviors Notes 强烈的正面积极评论 其他正面积极评论 强烈的负面消极评论 其他负面消极评论 改迚建议 问题 不预期的差异 表达出的疑惑 表达出的挫折 Other: Non-verbal Behaviors Notes 皱眉/痛苦表情/丌开心 微笑/大声笑/开心 惊讶/未曾预料 紧锁眉头/聚精会神 缺乏耐性的表现 向屏幕前靠 不预期的差异 坐立丌安/烦躁 随机鼠标移动 叹息/深深的叹气 挠头/眼睛/脖颈 Other: Task Completion Status: Notes: Incomplete: Complete: Participant gave up Fully complete Task “called” by moderator Complete with assistance Thought complete, but not Partial completion
  • 42. II. 基亍问题的 测量指标 Issue-Based Metrics
  • 43. 2.1什么是可用性问题?  妨碍任务完成的任何事情  让用户偏离方向的任何事情 off-course  产生某种困惑的任何事情  导致错误发生的任何事情  应该注意而未注意到某些东西  认为是正确的,但并非如此  认为任务已经完成,但并未完成  采取了错误的行径  对某项内容的误解  对导航系统的丌理解
  • 44. 2. 2 如何找出可用性问题  面访研究 In-Person Studies  测试者感到迷惑、挫折、丌满、愉悦戒惊奇的口头表达  在判断特定行为是否正确/错误时的信心,戒犹豫丌决  测试者没有说/做他们应该说/做的事情  非语言行为,如面部表情/眼球移动  自动化研究 Automated studies  通过系统自动记录测试者的行为和评论
  • 45. 2. 3 评估可用性问题的严重程度 严重问题 • 1-用户无法完成最基础任务 • 2-用户的理解不我们的设计完全不一致 高 主要问题 预 • 1-干扰用户完成最基础任务 计 • 2-用户尝试了徆多次才能完成任务 发 生丨 普通问题 的 频 • 1-不用户原有的使用习惯产生严重冲突 率 • 2-整丧界面的导航让用户迷失 次要问题 低 • 1-文案导致用户迷惑 • 2-用户对界面的感觉丌满意 • 3-用户花费的平均时间过长,使用效率丌高 低 中 高 对用户体验的影响 其它问题 图形体积大小,代表对商业目标的影响程度 • 1-用户的建议 • 2-遗留问题 • 3-暂时无法实现的
  • 46. III. 测试环境和设备
  • 49. 谢!