“以图搜图”正式的名称应该叫“相似图像搜索引擎”,也称为“反向图片搜索引擎”。最初的图像搜索引擎是基于文本关键字检索的。早期的Altavista、Lycos等搜索引擎正是利用图像的文件名和路径名、图像周围的文本,以及Alt标签中的注释索引和搜索相关图像的。1992年,T. Kato提出了基于内容的图像检索(CBIR)的概念,它使用图像的颜色、形状等信息作为特征构建索引以实现图像检索,即我们通常所说的“以图搜图”。基于这一概念,IBM开发了第一个商用的CBIR系统QBIC(Query By Image Content),用户只需输入一幅草图或图像,便可以搜索出相似的图像。同一时期,很多公司也将这一技术引入搜索引擎。哥伦比亚大学开发的WebSEEK系统不仅提供了基于关键词的图像搜索和按照图像类目的主题浏览,还可以利用图像的颜色信息进行基于内容的图像搜索。Yahoo的ImageSurfer也提供了使用例图的颜色、形状、纹理特征,以及它们的组合来进行基于内容的图像搜索功能。随着视觉技术的进步和发展,越来越多的搜索引擎采用这一方式来进行图像搜索,并在此基础上不断演进。
早期曾使用过“以图搜图”方式进行图像搜索的读者可能会有这样的印象,这种图像搜索方式在返回的结果的准确度往往不太令人满意。