文本匹配_基于深度学习的地址匹配算法

基于深度学习的地址匹配算法能有效处理多源异构的地址数据,通过Word2vec训练词向量,结合ESIM模型进行语义匹配,提高了匹配精度,F1值达到0.97。
摘要由CSDN通过智能技术生成

编者按

上一期,我们推出了“暗黑人格地理分布及其社会关联因素”;这一期,我们继续给大家带来实验室的最新研究成果——基于深度学习的地址匹配算法。

引言

        地址匹配是地理编码的关键环节,其作用是将输入的地址文本与地址数据库中的地址进行配对,最终转化为地理坐标。近年来,随着移动设备及位置服务的普及,以地址为空间信息基础的海量行业数据开始大量涌现,其含有的多数地址仅在语义具有一定的空间指向性,但缺乏标准的地址结构。传统的地址匹配方法主要关注地址文本间字与字的匹配关系,无法准确识别不同表达方式下不同地址的同一指向关系。因此在这一背景下,要对多源异构的海量地址数据进行匹配,传统的地址匹配方法已不再适用。

        深度学习是人工智能的一个重要分支,其已在自然语言处理等研究领域取得了突破性进展。不同于传统机器学习方法,深度学习具有很强的表示学习的能力,利用深度学习算法可直接从文本中进行语义特征的抽取。因此,将深度学习应用于地址匹配,可在很大程度上减小地址表达方式与结构对地址匹配度的影响。

63d15475185e300a19a7297b059ef61f.png

实验数据

        本文采用的基础地址语料来自于深圳市地址数据库,该数据库于2018年更新,共含有57,253,694条地址数据,文件的每一行为一条地址。为将该地址语料运用于地址匹配任务中&#

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值