AI测试的迷思

近年来，我一直关注AI相关的测试，并积极参与多个全国性测试社区和社群。在这些社区中，我与不同公司和领域的测试专家交流探讨AI测试相关话题，包括业界顶尖公司的专家和国内知名测试学者。我也参加了多个大会，聆听了许多关于AI测试的主题分享，并尝试了多款AI相关的测试工具，从中获得了许多知识和感悟。

在这些测试社区和社群中，我遇到了许多关于AI测试的问题，例如什么是AI测试，如何进行AI测试，AI测试有哪些工具与方法等。然而，当我在网上搜索AI测试相关的书籍时，却发现大量的AI开发相关书籍，却鲜有专门介绍AI测试的书籍。这说明测试业界仍在混沌中不断摸索前进。

为了分享我所学到的AI测试相关知识和经验，我梳理了自己的学习经历，尝试回答了一些我遇到的关于AI测试的常见问题，并将这些内容整理成文章，与大家一起交流探讨。

AI测试的迷思

在讨论AI测试时，通常存在两种理解：

第一种是利用AI辅助当前的软件测试，例如使用AI系统学习测试分析和测试设计，进而自动生成测试用例并自动化实现这些测试用例。

第二种则是对AI系统进行测试。尽管业界对于AI系统进行测试仍然使用常规测试手段，如功能测试、性能测试和安全测试等，但测试其功能有效性时往往难以获取明确的测试数据和验收条件。这种情况下，只能通过对算法的深入理解和根据经验生成或寻找数据，并大致评估功能测试结果的有效性来进行测试。

而利用AI辅助当前的自动化测试则是一个新兴领域。使用AI（如深度学习）系统来帮助测试工作绝对是近几年最热门的测试趋势之一，其中包括自动生成并执行自动化测试、大规模测试结果分析、自动化探索性测试、缺陷定位等。

美国已经有多家公司推出了商用的AI测试工具