问题背景
QA搬砖日常中,你会不会有这样的问题,测试设计时有些场景没考虑到,上线就因为测试中没覆盖到的场景而导致缺陷溢出。从缺陷分类统计来看,类似这样的例子占比是很高的。
解决措施
仅依靠测试者设置的场景,模拟的数据,很多情况下是远远不够的,是很难覆盖全面的。取生产数据来做测试,即以生产的样本来模拟测试。这是对我们测试设计的补充,可以发现很多我们想不到的设计和场景,进而发现不可预知的问题。
- 测试设计的时候,优先基于现有的生产数据场景做测试设计;
- 基于最近的生产数据,或有代表性的生产数据,做回归测试;
把以上两点融入到测试设计思想,和测试流程,即可大大降低该类型缺陷的逃逸。