模糊搜索匹配有问题？

最新推荐文章于 2024-04-07 06:53:04 发布
最新推荐文章于 2024-04-07 06:53:04 发布
阅读量272 收藏
点赞数
文章标签： 数据库 python
原文链接：https://my.oschina.net/xiaominmin/blog/1935138
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

模糊搜索匹配有问题？

一：设计想法：

1.搜索词分词(根据品牌名称匹配)
搜索词包含品牌词，品牌词包含搜索词，互相只要一项包含
(分词之后做同义词可能会匹配出其他品牌)

2.搜索词(不分词)
搜索词包含品牌词
(增加一个字段品牌词匹配字段,这个字段专门做匹配，比如字段值：小米,xiaomi,XIAOMI)


3.根据搜索词（不分词）包含问题？
搜索小米：搜索不到xiaomi.(业务组必须提供一个字段，来匹配搜索关键词)


二：根据搜索词(分词)后在包含

搜索小米(最大分词)：能搜索到xiaomi，由于是最大分词匹配。所以会匹配到，小，米。小米

2018-08-27 10:03:38.775  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.777  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:a 匹配到英文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Bellamys/贝拉米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Milton/米尔顿 匹配到中文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Ameter/一米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Yummy Earth/亚米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Miji/米技 匹配到中文匹配名称：{}
2018-08-27 10:03:38.778  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:BAYMAK/巴米克 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:多米诺 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:米小胖 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:米蔻 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:RICE DAY/米时代 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:米妮哈鲁 匹配到中文匹配名称：{}
2018-08-27 10:03:38.779  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Miji 米技 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:五米常香 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:朵唯尔米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:拉米奇 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:AC米兰 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:MICHELIN/米其林 匹配到中文匹配名称：{}
2018-08-27 10:03:38.780  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:MOMAX/摩米士 匹配到中文匹配名称：{}
2018-08-27 10:03:38.782  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:the little sugar milk baby/一米半糖 匹配到中文匹配名称：{}
2018-08-27 10:03:38.782  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:BeddyMia/贝迪米娅 匹配到中文匹配名称：{}
2018-08-27 10:03:38.783  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:凡米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.787  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:机械师 匹配到中文匹配名称：{}
2018-08-27 10:03:38.793  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到中文匹配名称：{}
2018-08-27 10:03:38.795  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:a 匹配到英文匹配名称：{}
2018-08-27 10:03:38.798  INFO [lovego-search,8f7294e842046a29,1b91cb8754b13d40,false] 39472 --- [nio-9100-exec-4] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到中文匹配名称：{}

搜索小米(最小分词)：能搜索到xiaomi，由于是最大分词匹配。所以会匹配到， 小米。由于同义词会匹配a

2018-08-27 10:11:56.602  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : key:xiaomi 匹配到中文匹配名称：Xiaomi/小米
2018-08-27 10:11:56.604  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : key:xiaomi 匹配到英文匹配名称：a
2018-08-27 10:11:56.613  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到中文匹配名称：Xiaomi/小米
2018-08-27 10:11:56.616  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : key:Xiaomi/小米 匹配到英文匹配名称：a
2018-08-27 10:11:56.620  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : key:小米 匹配到中文匹配名称：Xiaomi/小米
2018-08-27 10:11:56.623  INFO [lovego-search,61de2117481d7540,cb57d04699738974,false] 36132 --- [nio-9100-exec-1] c.l.s.service.BrandOptimizationService   : 匹配  brandIds: [2782, 1359]  key : 小米手机


总结:
如果用搜索词分词后匹配，词典里面必须配置品牌名称。而且，必须用ik_smart。但是匹配到同义词之后，还是会出现匹配到a这种情况


最终方案：
根据搜索词ik_smart分词（词典里面必须包含品牌词），然后根据品牌名称是否包含搜索词项。包含则匹配品牌

转载于:https://my.oschina.net/xiaominmin/blog/1935138

weixin_34248258
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
模糊匹配及Solr关键词自动提示应用
Spring , Hadoop, Spark , BI , ML
08-13 5884
1. 字符串相似度字符串相似度用于衡量2个字符串之间的相似度，这里的相似度一般指形式上的相似，而非语义上的相似。字符串相似度算法是模糊字符串匹配（搜索）的核心内容之一，在搜索引擎中的拼写检查、关键词智能补全中也发挥重要重要。在更高层次的实体链接（识别）或实体消歧应用中，也是重要的研究内容。 字符串的模糊匹配也叫模糊匹配，有点类似于正则表达式匹配，但是存在一些不同。字符串匹配（正则表达式）通常关注精
模糊匹配算法java实现
02-04
模糊匹配算法在信息技术领域中广泛应用于数据搜索、文本相似性检测和信息检索等多个场景。Java作为一种流行的编程语言，提供了丰富的库和工具来实现各种模糊匹配算法。本篇将深入探讨如何使用Java实现模糊匹配，并...
一种新的模式匹配(模糊搜索)算法
09-24
这是我本人写的一篇论文，无奈因为本人缺乏深厚的文字功底和理论能力，论文中出现大篇幅源代码，且不会借鉴他人的文献，被本校的学报退稿了，现在想要拿出来与大家分享。本论文所研究的模式匹配算法是一种不同于传统的KMP算法和BM算法的前所未有的模式匹配算法——字符串拆分算法。本论文未在任何正式期刊上发表过，可以通过论文查重，大家可以下载拿去修改修改当做自己的毕业设计（论文）。如果有条件的话，在正式期刊上发表我也不介意，但是希望发表之后在作者那一栏上给我的名字留个位置。
前端独立实现模糊查询--filter()与match()
十年磨一剑，沉淀……
11-18 1万+
filter()方法和match()方法结合使用可以使前端已获取数据的情况下独立实现模糊查询，不再调用后端接口，这种情况适用与查询次数比较多，且数据比较固定的情况，减少调用后端接口一定程度上可以缓解后端压力。 示例： teacherList = allTeacherList.filter(array => array.name.match(searchContent)); 这里有几个小t...
Android通讯录模糊匹配搜索实现（号码、首字母、简拼、全拼），这份354页笔记的Android进阶知识+大厂高频面试题
最新发布
2401_84152308的博客
04-07 953
if (“vnd.android.cursor.item/name”.equals(mimeType)) { // 是姓名} else if (“vnd.android.cursor.item/email_v2”.equals(mimeType)) { // 邮箱if (!} else if (“vnd.android.cursor.item/phone_v2”.equals(mimeType)) { // 手机。
对数据进行模糊匹配搜索（动态规划、最长公共子串、最长公共子序列）
后除
06-11 711
倘若要在一堆数据中对一个关键词进行匹配搜索，传统做法是把数据拆分开，然后遍历他们，看看是否包含这个关键词，对于 “fin” 和 “finish” 这样存在包含关系的单词来说是没问题的，但是对于 “fish” 和 “finish” 这样并不存在包含关系的单词就失效了，这时候期望计算出两个单词的相似性，比如 “fish” 和 “finish” 都包含 “ish”，“ish” 的长度是 3，我们可以理解相似性为 3。对最长公共子串进行升级来查找所有序列中最长子序列，版本管理中使用的。来寻找两个或多个已知字符串。
拼音汉字模糊匹配字库（仿google和百度搜索引擎字词库）
03-08
拼音汉字模糊匹配字库（仿google和百度搜索引擎）共有2万多个字词和拼音对应
C/C++实现字符串模糊匹配
09-02
本文分别给大家介绍了2个C++在Linux平台和windows平台下实现字符串模糊匹配的方法，基本的核心思想都是一样的，均是使用fnmatch函数，有需要的小伙伴可以参考下。
搜索模糊匹配小插件
12-05
在IT领域，"搜索模糊匹配小插件"是一种常见的工具，它主要应用于数据查询、文本检索和用户输入预测等场景。模糊匹配技术是相对于精确匹配而言的，它允许用户在输入时不必完全准确地键入目标信息，系统也能找出相关的...
通讯录模糊匹配
02-28
比如说您输入的是一个字“小”，返回的list中将包含通讯录中所有带有“小”字的人名。 如果您输入的是“小鑫秦美”，而您的通讯录中没有“小鑫秦美”这个人。但是仍然可以返回list。这个list包含的内容为“小秦”，...
具有关键词提取与关键词模糊匹配的错误搜索系统
06-04
所提出的错误搜索系统利用中文关键词提取和关键词之间的中文模糊匹配，以处理后的关键词为索引来寻找错误的解决方案。 此外，错误搜索系统在错误，原因和解决方案之间建立了对应关系，并根据其特征将它们划分为不同...
spark-fuzzy-matching：spark中的模糊匹配功能（https：spark-packages.orgpackageitspawanbhardwajspark-fuzzy-matching）
01-31
spark-fuzzy-matching：spark中的模糊匹配功能（https：spark-packages.orgpackageitspawanbhardwajspark-fuzzy-matching）
客户端模糊搜索：TypeScript中的简单客户端模糊搜索
02-19
客户端模糊搜索 一个简单的客户端模糊搜索。 函数有两个参数， searchString （串）和searchTerm （串）。 在以下情况下将返回true ： searchTerm在任何地方找到searchString 如果出现以下情况，将返回false ： searchTerm没有在任何地方找到searchString searchTerm为null searchTerm未定义 先决条件 Node.js npm i -g npm 打字稿 开玩笑（ts-jest） 设置 git clone https://github.com/JDomleo/Client-side-fuzzy-search.git npm i 测试 npm run test 去做 语言能力 JavaScript jQuery的 回购 例子 林亭 npm包
模糊搜索（二）
snpmyn
06-21 590
库 TinyPinyin 实现 依赖 implementation 'com.github.promeg:tinypinyin:2.0.3' 工具类 /** * 关联否 * * @param oneString 字符串一 * @param twoString 字符串二 * @return 关联否 */ public static boolean relate(String oneSt...
java搜索模糊匹配_弹性搜索中的模糊搜索不同于模糊匹配布尔值
weixin_30096321的博客
03-03 240
我告诉模糊查询这个文件几乎不是一个好主意Found-fuzzy所以我不知道这样做的最佳方法是什么.1074573_我的例子是一个包含'蝙蝠侠'的电影名称 . 但是，用户键入'bat man'(带空格) . 这对模糊查询应该找到蝙蝠侠是有意义的 . 它也应该找到像蜘蛛侠这样的其他变种，但是现在我猜是好的 . (不是真的，但......)所以模糊搜索实际上返回的结果比下面的匹配结果更多 . 有任何想...
第十一章 - 模糊匹配（like）、正则匹配（REGEXP）、文本处理函数、时间处理函数
M冰的博客
02-22 1550
模糊匹配like()的用法，正则匹配REGEXP的用法， 文本拼接concat(),文本提取substring(),substring_index()的用法 其他常用文本处理函数， 常用日期和时间函数等
redis模糊匹配搜索
m0_67401761的博客
08-24 5445
这个是关闭连接，要不然链接数量上限之后会一直阻塞。这里使用的是spring的一个模板redisTemplate。keys语法简单，但是数据量大的时候容易出现超时异常。keyPatten：正则表达式接收*、、[]keys a* 可以匹配以a开头的字符串。limitCount:返回的数量。其匹配的字符跟一般的正则一样。接收的是一个Cursor。
搜索框自动补全(模糊匹配)功能实现
qq_42112846的博客
03-02 2517
本地实现了一个搜索框自动补全的小功能,在JQuery UI的autocomplete插件的基础上,加入了自己的业务代码,贴出来回顾一下,同时可以给大家一个参考 首先贴出的是JQuery Ui 的自动补全插件部分的代码,后面的功能都是在其基础上追加的,直接拷贝到你的本地就可以直观的看到运行效果,也可以到官网上面体验和查看,为了方便,我这里是直接引入的JS链接； jQueryUI 链接：https...
数据库查询模糊匹配
热门推荐
bacole的博客
04-10 2万+
执行数据库查询时，有完整查询和模糊查询之分。一般模糊语句格式如下：SELECT 字段 FROM 表 WHERE 某字段 LIKE 条件; 其中，关于条件，SQL提供了四种匹配模式:%：表示零个或多个字符。可以匹配任意类型和任意长度的字符，有些情况下若是中文，请使用两个百分号（%%）表示。select * from flow_user where username like '%王%'; 将会把flo
python 正则匹配模糊搜索
10-21
Python正则表达式模块可以进行模糊匹配，这意味着您可以使用正则表达式来搜索具有一定模糊性的字符串。在正则表达式中，您可以使用特殊字符来表示模糊匹配，例如“*”表示匹配任意数量的字符，“+”表示匹配一个或多...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值