可用性测试报告——简书

一、测试基本信息

• 测试目标：对简书网站进行可用性测试，观察用户在使用简书网站时是否存在问题或困难以及用户体验如何
• 测试规则制定：用户根据主持人制定的五个任务进行限时实操，用户在测试过程中的一切数据将会被主持人记录下来，最后主持人整合分析做成一份针对该网站的可用性测试报告。
• 测试者信息：

1. 采访对象：8个
2. 测试时间：2019.6.11-2019.6.18
3. 测试地点：中大南方宿舍&东区饭堂

二、二分式成功任务

任务设计

定义二分式成功任务成功

1. 更换为夜间模式。（更换主题）
2. 找到市场推广、品牌合作的联系方式。（联系方式）
3. 开通1个月的会员。（开通会员）

定义二分式任务失败标准

1. 超过规定时间2分钟
2. 参加者主动放弃

任务结果

呈现二分式成功率

可看出对用户来说任务一、任务二存在一定的难度，而任务三是比较容易完成的。

三、成功等级的任务

• 任务设计

1. 找到已发布的“2019-06-10”并改设为私密文章。（改为私密）
2. 找到“【Python教程】（1）：认识python，环境安装以及第一个程序”该文章并收藏。（收藏文章）

定义成功等级

• 1=没有问题。

  A）成功等级任务1

  参加者没有对“‘2019-06-10’这篇文章在哪”和“私密文章是什么”表示疑惑并且没有遇到困难，成功完成了任务。
  

  B）成功等级任务2

  参加者没有产生“‘【Python教程】（1）：认识python，环境安装以及第一个程序’这篇文章是什么在哪里”以及“什么是收藏、要怎么收藏”的疑惑并顺利且成功完成了任务。
  

• 2=小问题。

  A）成功等级任务1

  参加者最终成功地完成了任务，但是完成过程中曾尝试在搜索框中搜“2019-06-10”这篇文章，或者点击了其他对任务完成无用的按钮，但很快便意识到然后修改过来了，最终完成任务。
  

  B）成功等级任务2

  参加者最终成功地完成了任务，但是参加者对该文章产生了疑惑，当找到该文章时也花费了一些时间寻找“收藏”按钮。
  

• 3=大问题。

  A）成功等级任务1

  参加者成功完成了任务却花费了较长时间，并且有主持人的提示。参加者在过程中尝试在搜索框中搜该文章，并且进行了一段时间的查找，当后来知道在某个特定页面的时候，又花费一些时间找该文章，最后尝试多多才最终寻找到设置为私密文章的按钮。
  

  B）成功等级任务2

  参加者成功完成了任务却花费了较长时间，并且有主持人的提示。参加者在寻找“收藏”按钮时误点了“喜欢”按钮，但及时意识到并最后成功完成任务。
  

• 4=失败/放弃。

  A）成功等级任务1

  参加者没有寻找到该文章也没有找到设置为私密文章的按钮。或者规定时间2分钟到了。或者参加者自己选择放弃。或主持人中止了任务。
  

  B）成功等级任务2

  参加者没有寻找到该文章也没有找到收藏的按钮，或者是误点了“喜欢”按钮，错以为“喜欢”和“收藏”按钮相等，并直到时间结束也没有改正过来。或者规定时间2分钟到了。或者参加者自己选择放弃。或者主持人中止了任务。
  

• 任务结果

参与者任务完成的成功等级

呈现成功等级

比较两个不同任务的成功水平

四、合理的任务时间的计算规则制定

任务开始与结束的计算规则：

• 采访对象朗读完任务记为开始。
• 采访对象认为自己已完成任务并说出“任务完成”记为结束。

五、任务分析图表

两个用户组别的结果图表

• 划分组别：按照参加者的使用频率（即曾使用过和没使用过的用户）划分
  • 第一组（曾使用过）为参与者1-4，第二组（没使用过）为参与者5-8

比较两个不同用户组别的任务成功率

任务时间的结果图表

参与者完成任务的时间

六、测试总结

从以上图表可以得出，一般来说，曾用过该网站的用户应该比未曾用过该网站的的成功率要高、耗时更短，结果任务一相反。8名参加者中，任务一的成功人数，未曾使用过该网站的用户比使用过该网站的用户还要多一名，说明任务一的功能并不随着使用网站次数的递增而可用性更高，间接来说该功能设计不合理或者有其他问题。

总结的网站可用性问题

问题1

任务一“更换为夜间模式”失败率最高，用户找不到该功能的设置位置，并且不受使用频率的原因所限，没用过该网站的用户甚至比用过的成功率更高。说明“夜间模式”的按钮设计不好，让用户误以为只是修改字体样式或大小的，而不是更换“夜间模式”。

问题2

用户在找“市场推广、品牌合作的联系方式”的时候，误点了旁边的“加入我们”、“合作伙伴”等。浪费了一点时间，但问题影响不大。

问题3

用户进入“会员”界面和我预想的不一样，大部分用户并没有发现最明显的入口——首页的偏右边的黄底白字“简书会员”，而是通过“我的钱包”进入。

问题4

未用过该网站的用户首先会去搜索该文章，而不会先想到是“我”的已发布的文章。所以部分用户需主持人提醒后，才知道是在我的文章里面找。也有部分未用过该网站的用户停留在我的主页里的改文章不知如何下手。问题影响不大。

问题5

用户花费较长时间找“收藏”按钮，但因为用过该网站的用户都在一分钟内找到，所以判定为需使用过一段时间的用户才比较快速完成该按钮。

• 部分用户误以为在还没点进去该文章时有快捷键，结果并没有
• 部分用户误以为文章最下方有“收藏”，结果并没有
• 部分用户误以为“喜欢”（❤）是“收藏”，点了才知道不是，又取消了重新寻找

七、综合多种因素的严重性评估

1. 严重性等级制定（有以下三种维度）

1）. 对用户体验的影响（0=低，1=中，2=高）

• 低：会让参加者产生心烦或沮丧等负面情绪，但不会导致任务失败。这类问题可能只是稍微降低用户满意度。
• 中：这类问题会显著提高任务的难度，但不会直接导致任务的失败。遇到这类问题时，用户经常要绕很多弯子或走了错误的操作路径才能找到需要寻找的目标。这类问题在一定程度上影响任务完成的有效性和效率，同时也会影响用户的满意度。
• 高：直接导致任务失败。遇到这类问题后基本没有可能再完成任务，这类问题对效率、有效性和满意度都有极大的影响。

2）. 对商业目标的影响（0=低，1=中，2=高）

• 低：操作过程比较顺畅。使用过程中可能会产生疑惑，但并不影响用户了解这个产品的主要功能和目标。
• 中：操作过程遇到困难，但最终得以解决。用户完成任务的效率降低，一定程度上影响了商业目标的实现。
• 高：直接导致任务失败，用户无法完成任务。这类问题导致用户无法完成他的需求，也对产品目标造成极大影响。

3）. 对技术、实现成本的影响（0=低，1=中，2=高）

• 低：实现成本低，遇到的技术问题少，对用户的要求较低
• 中：实现成本中等，遇到的技术问题，对用户的要求一般
• 高：实现成本高，遇到的技术问题多，对用户的要求较高

2. 评估结果：图表展示综合多种因素的严重性评估的结果

问题严重性等级分数

综合多种因素的严重性评估

八、客户旅程地图