一、搜索的业务逻辑
“搜索Query→查询语义理解→召回→排序→搜索结果”
当用户在搜索框输入一个Query时,系统通过对语义的理解,召回相关文档或商品,在通过算法排序,安客户实际的搜索意图进行前后排序,最终解决其搜索需求,实现业务转化。
其中**【查询语义理解】与【排序】**对搜索引导的业务目标最为重要。
二、自然语言处理技术(NLP)在搜索上的应用
1. 概念介绍
想实现搜索引擎效果的优化,就一定要对自然语言处理技术有一定的了解,因为用户输入一个Query里从学术角度解读,自然语言智能研究实现了人与计算机之间用语言进行有效通信,它是融合语言学、心理学、计算机科学、数学、统计学于一体的科学。
自然语言处理被学者誉为”人工智能皇冠上的明珠“,研究覆盖了感知智能、认知智能、创造智能这样的学科,是实现完整人工智能的必要技术。
1)感知智能
是指从无结构化数据中识别出重要的要素。比如给一个query,分析出包含的人民、地名、机构名等。
2)认知智能
是在感知之上,能够理解其中要素的含义以及进行一些推理。比如“谢霆锋是谁的儿子 谁是谢霆锋的儿子”两句话。词和实体都差不多,但语义差别很多。这是认知智能要解决的问题。
3)创造智能
比如计算机指能够理解语义的基础上,创造出符合常识、语义、逻辑的句子。比如自动写出行云流水的小说、创造娓娓动听的音乐 能够无违和跟人自然聊天等。