《破茧成蝶》读书笔记⑨：成果检验
十四、成果检验——设计优劣可以判断
上线前：可用性测试、AB测试
上线后：用户数据、产品反馈
14.1可用性测试（定性分析）
让用户自己测试
1、设计任务：能反映出核心操作的典型任务
2、招募用户：5名有代表性的用户
3、进行测试：观察用户操作，记录问题
4、分析问题：找出最严重的问题，进行优化
设计任务需要注意
1、给出目标，不要直接给操作（ex. 不要“找到喜欢的文章，点击收藏”，而是“有篇文章你喜欢，以后还想找到它，会怎么做”）
2、尽量选择最重要的任务进行测试，一般30-50分钟，5-8个功能点。简易的可用性测试时间可以更短
3、符合正常的操作流程
测试用户的选择
1、选择有代表性的用户，不要选对产品过于熟悉的同事
2、用户数量：5名左右的人可以发现85%的问题
测试过程的注意事项：
1、切忌引导性过强：比如不要问“你是不是比较喜欢这个颜色的按钮”
2、操作行为永远是重点：减少语言对用户的干扰，鼓励他们“出生思维法”，要求用户在操作时将完成任务时的思考、行为、感受都描述出来
3、不要忽视现场反应：咦、啊、天啊……等语气词
4、考虑使用场景：购彩网站“还有3分钟关闭，你会如何操作”，移动端需要考虑吵闹的公车……
5、感谢被测者，给予一定报酬
问题的分析与改进：问题频数、严重等级、优先级（问题频数*4/总参与人数+严重等级）、违反的可用性准则
最小化运用可用性测试：资源有限，可以缩小可用性测试的范围，尽早发现问题是有利的
14.2A/B测试（定量分析）
设定衡量标准：比如PV、UV、点击量、转化率、跳出率……
对同一个用户展示同一个方案
保证2个版本同时测试
单一变量：比如就按钮、文案、颜色、图片……不能同时改变多个
延伸——灰度发布：旧版本作为A，新版本作为B，部分升级
14.3定性的用户反馈和定量的产品数据
收集用户反馈：网站有意见反馈、在线客服、用户论坛等，还可以去用户市场（appstore）
分析用户反馈：过滤、归类，不是每个意见都一定全盘接受
用数据检验产品目标
以上内容为《破茧成蝶》（作者：刘津、李月）的第9章读书笔记及摘要，本人加入一定量自己的理解；因水平有限，欢迎大家交流指正，谢谢~
