加速器测试常见操作错误
常见错误大多来自先看到结果再改变规则。测试计划、指标和排除条件必须在运行前确定。 本次实验围绕同时更换节点和协议、只截取最快的一次、不同时间顺序测试候选、忽略直连网络变化、用节点数量代替质量、发布结果却不写日期展开。
- 栏目
- 实验问答
- 状态
- 已记录 / 待跨日复测
- 阅读
- 9分钟
标记失败样本
同时更换节点和协议。超时、断线、切换失败和恢复耗时使用统一状态码，原因无法确认时也不能从统计中删除。 常见错误大多来自先看到结果再改变规则。测试计划、指标和排除条件必须在运行前确定。
执行重复测试
只截取最快的一次。按照预设间隔与轮数执行，不因结果好坏延长或缩短某个候选的测试；每轮原始值完整保存。 该步骤还需与“不同时间顺序测试候选”联合核对，不能脱离完整批次单独使用。
建立对照基线
不同时间顺序测试候选。不启用加速器完成同工具测试，基线波动异常时暂停产品比较，先处理本地接入问题。 该步骤还需与“忽略直连网络变化”联合核对，不能脱离完整批次单独使用。
发布阶段结论
忽略直连网络变化。报告注明样本数量、统计方式和适用条件，并保存原始记录；条件变化后追加复测，不覆盖旧结论。 该步骤还需与“用节点数量代替质量”联合核对，不能脱离完整批次单独使用。
检查误差来源
用节点数量代替质量。检查后台任务、无线干扰、目标负载和时间顺序，只有差异超过同批次自然波动才进入比较。 该步骤还需与“发布结果却不写日期”联合核对，不能脱离完整批次单独使用。
写入实验条件
发布结果却不写日期。在记录表中填写设备、系统、网络、客户端、节点、协议、目标和时间，任何一项变化都生成新的批次编号。 该步骤还需与“同时更换节点和协议”联合核对，不能脱离完整批次单独使用。 批次复盘：常见错误大多来自先看到结果再改变规则。测试计划、指标和排除条件必须在运行前确定。 原始数据与结论同时归档。复查顺序为发布结果却不写日期、用节点数量代替质量、忽略直连网络变化、不同时间顺序测试候选、只截取最快的一次、同时更换节点和协议，下一轮沿用相同工具和状态码。