百度产品体验评测(一) | 如何做评测
2016-04-29 {{allComments.length}} 29031 干货分享评测这个词大家一定不会陌生,互联网上有各种评测平台,王自如和罗永浩间关于锤子手机评测展开的较量也还记忆犹新。评测内容也是包罗万象,智能硬件评测、自行车评测、旅行设备评测、美食评测、游戏评测、各种应用评测等等,只要我们能想到的产品基本都可以拿出来评测一下,验证下产品的质量如何。 在评测的过程中,由于参与评测的人不同,评测的内容不同,对于评测的定义也不同,评测的专业性和产生的效果也差异很大,那么该如何定义评测呢?为什么要做评测呢?该如何做评测呢? 这里根据在百度质量部内对于移动端、PC端等不同形态产品的评测经验,和大家分享下对于评测的一些理解,欢迎大家共同探讨。 详情 ↓
评测就是通过用户调研、专家评测、客观数据验证等多种手段,从主观、客观各个方面验证一个产品各个维度的产品质量情况。
以往测试人员测试主要从产品设计角度考虑,产品是否符合产品经理的设计,各种场景下功能是否可用。但是评测不仅要考察功能是否可用,还要验证用户的使用场景中功能是否好用、易用。
在评测的过程中,还要考虑主观和客观数据相结合,使评测发现的问题具有权威性,可以得到产品各角色的认可,推动产品的改进。不然就会出现王自如评测锤子手机的情况。通过调查问卷、焦点小组、可用性测试、行为观察、专家测试、用户画像等多种用户研究手段能够了解用户的使用习惯、用户特点、用户对产品的不满、产品中存在的体验问题……,同时,还要需要结合大数据用户行为分析、资源数据量化、性能稳定性数据等多种客观数据来对产品质量进行全面的解读。
按照以往测试人员的测试方法经常会出现这样的情况:
产品测试认为的产品质量和用户使用的质量间存在落差。所以测试时不光要验证产品可用,还要考虑产品是否好用。
评测的大体流程如下:
1)明确评测内容
在进行评测之前,首先要明确本次评测的目标和对象,希望通过本次评测解决什么问题。这决定了后续进行评测的总体方向和关注点。
以下是经常遇到的几种情况:
了解目前产品的整体质量状态。产品中还存在一些问题,但是整体产品质量到底是什么样呢?用户对产品的整体满意程度是怎样呢?
解决特定问题。如:了解用户目前最不满意的点是什么;产品中存在一些严重问题,想通过评测了解这些问题的根本原因是什么
了解和竞品相比目前所处的状态。通过评测本产品及其竞品,了解自己的优势、不足,在市场主流产品中所处的位置
2)制定评测标准
确定评测目标和对象后,需要根据评测内容和目标制定相应的评测标准,评测标准需要覆盖本次评测包含的所有内容,并且根据用户实际的使用场景,考察用户场景下各个环节的用户关注点,比如资源质量情况、基础能力质量情况、用户体验质量情况、运营质量情况。评测标准中包含详细的评测指标和评测点,是整体评测的指导书
3)选择评测方法
根据评测内容的不同,评测方法也不同,这里列举出一些典型的评测方法,后续在评测介绍系列中会再逐一进行详细介绍,敬请期待。
4)执行测试
根据选取的评测方法,进行实际测试即可。在测试的过程中需要注意执行方法的正确性、客观性,避免评测结果产生偏差
5)评测结果分析
根据评测方法发现的问题,需要进行分类,并且确定其对用户的影响程度
6)报告呈现,推动问题解决
将发现的问题利用用户旅程图、热点图等适当的形式呈现出来,方便产品的不同角色理解,同时测试人员需要持续的推动评测问题的解决和跟进。
本期就介绍到这,后续还有关于评测相关模型、方法的各种详细介绍,敬请期待!
如果你看的意犹未尽,如果你想随时随地充实自己,请扫描以下二维码,关注我们的公众账号,可以获取更多技术类干货,还有精彩活动与你分享~