成果如何检验

1.可用性测试（定性）

可用性测试是在产品未上线、或预上线时进行的产品测试，通过观察用户使用产品的行为，发现产品中存在的问题。

（1）测试用户的选择

选择有代表性的用户——产品的目标用户

（2）用户数量的选择

调查表明，5名左右的用户可以发现产品中80%左右的问题。（小改动：3～5名，大改动：5～8名）

（3）测试过程中的注意事项

切忌引导性过强（尽量不去提示用户）

观察用户操作时的举止行为（将用户在使用产品时的，思考、行为、感受全部描述出来）

不要忽视现场反应

考虑使用场景（例如：快过生日送什么礼物、还有三分钟就停止销售了，迅速买一张彩票把）

给予报酬

2.A/B测试法（定量-群体）

A与B方案同时上线

1.设定A/B测试的衡量标准

从产品目标的角度出发，可以将pv、uv、点击率、转化率、跳出率、二次返回等数据作为衡量标准。

2.对同一用户呈现相同的页面

A/B测试需要保证同一个用户在测试期间，看到的都是同一个方案，以此来保证产品数据的准确性。（根据用户的客户端本地Cookie，服务端对历史记录中的方案进行相同的配置，确保用户每次看到的都是同一版本）

3.保证两个方案同时测试，确保数据准确。

4.单一变量

过多的变量导致对数据过多的干扰，不利于数据的准确性。

3.灰度发布（A/B测试的一种）

将旧版本作为方案a，将新版本作为方案b，两个版本同时上线，让一部分用户继续使用旧版本，让一部分用户使用新版本，然后观察用户反馈和产品数据。如果用户的反应很好，可以逐步扩大范围，直至全部升级为新版本。如果部分用户在使用新版本的过程中发现一些问题，可以及时优化，同时对比新版与旧版的产品数据，如pv、uv、点击率、转换率、跳出率、二次返回等数据，可以直观的看出改版的成果和差距。

4.定性的用户反馈和定量的产品数据

根据用户反馈，通过从内容、功能、使用流程、设计、新功能建议和现有bug几方面对问题进行归纳。（使用流程、易用性、视觉设计）