预测试:在进行正式测试前,一定要先进行预测试,可以帮助团队发现流程上的问题以及熟悉整体流程,避免测试中的意外事件。
二、测试实施
测试活动的执行主要有以下几个环节:
1、招募测试用户:先通过招募问卷筛选用户,同时可大量收集用户信息,作为用户特征数据。确认要参与测试的用户,根据需要,可提前要求签署保密协议。
2、为测试用户提供培训和测试指南(可选):有些测试需要用户先具备一定的技能,或者用户进行的是在线非引导式的测试,此时可考虑先提前对用户进行必要的培训或提供测试指南。
3、按照测试流程进行测试:这个环节主要按照脚本执行,但通常都会出现很多意外的事件,需要测试人员随机应变。
4、记录测试过程和测试结果:在测试前,要先规划好数据采集的方法。一般来说,我们会先准备一个excel记录模板,数据直接记录即可,后续可在excel中执行分析。通常一场测试由两人配合,由主持人进行引导,记录人进行记录。除了用户评价反馈,其他的数据我们都会转化为数字形式或统一规格的记录方式(如预设置好下拉选项,记录时直接进行选择),以避免最终的统一格式转化工作。
5、收集测试用户的反馈和建议:用户的反馈和建议原句记录即可,如果有录音,那直接用录音转文字工具会更方便。要注意的是,很多时候用户说的和做的是不一致的,要注意观察。另外,用户的建议一般来说仅作参考,建议是否有实际价值、是否能落地,最终需要多方讨论。
6、感谢及发放酬金:每次的活动都需要考虑是否发放酬金,同时要有明确的酬金机制以及记录发放的形式。通常有报酬的活动,更容易招募到有价值的参与者。
三、分析总结
在数据分析洞察阶段,通常包含以下步骤:
1、整理数据:一般情况下,收集到的数据不能马上用来分析,通常需要先整理。数据整理可以包含:筛选数据、创建新变量、检验应答、检查一致性、数据转换等。
2、分析测试结果和问题:不要只把数据铺开或简单排序,我们需要把数据背后可以得到的结论或者可以发现的问题总结出来。同时,针对问题,还要给出问题归类和严重性评估,这样才有实际落地意义。
3、提出改进建议和解决方案:在提出问题以后,我们也可以针对问题给出相关的建议。建议可以从客户的反馈、解释中进行洞察总结,也可以从竞品的解决方案中提供参考,或者,我们也可以拉上相关的角色,一起讨论出解决方案和计划。
4、撰写测试报告:根据前面得到的内容,我们可以按以下结果撰写报告:
① 研究概述:测试目标、样本描述、评估方法
② 核心结论(可放在一页总结)
③ 结果解读:问题/结论描述、原因解读、严重程度/影响程度、相关数据结果
④ 解决方案
⑤ 附录:用户详情、问卷等
5、总结与反思:此部分不必包含在报告中,但每次对活动的总结和反思将有助于我们逐步优化体验测试活动,并完善相关体系。
最后的话
最近AI快速发展,后面体验测试活动应该也会向自动化方向演进,大家在工作中也可以多多发掘人工智能的潜力,让自己的工作变得更加简单高效,天天准时下班~