Diff 测试应用

什么是diff测试？

diff测试，也可称为一致性测试，在这里是对代码输出结果的对比，具体来说，就是通过对比相同输入，相同接口，不同代码的测试，对比其结果的差异，从而发现潜在的bug。

diff测试能解决什么问题？

diff 测试将新代码和旧代码并行运行，以便查找服务中的潜在错误。例如：在接口方面可以提高自动化Bug召回率与场景验证。

diff测试常见的使用场景？
使用场景大致分为三类：
接口 diff 重点在Json Diff上
UI diff 重点在图像质量评价指标上，如何降噪，浏览器的兼容性测试
算法评估 diff 图像标注，数据标注，不同算法的针对性运用

参考链接：
https://github.com/opendiffy/diffy

Diffy 使用新代码和旧代码并排运行实例在服务中发现潜在的错误。无论它收到到每个运行实例的任何请求，Diffy 都会充当代理和多广播。然后，它比较了响应，并报告了这些比较可能出现的任何回归。Diffy 的前提是，如果服务的两个实施返回"类似"响应，以满足足够大且多样化的一组请求，那么这两个实现可以视为等价项，而较新的实施则无回归。