![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
AI
文章平均质量分 91
jasstion
搜索推荐架构师
机器学习工程师
深度学习研究与应用
展开
-
基于elasticsearch实现大规模向量检索
什么是向量搜索?向量检索是基于向量之间的距离对已有documents进行相关性排序,和输入document向量距离越小则认为在某个维度上越相似会优先排在前面。document可以是世界万物,比如图片,一段音视频,一段文字,一张人脸等,对于任何种document, 你都可以根据自己的需求对其进行模型训练,基于训练好的模型抽取特征进完成documents相似性检索。已有向量搜索方案的对比以及优势向量检索技术已经出现很久了,相关的技术方案也挺多的,比如:faissMilvus还有很多其他的, 就原创 2021-10-10 15:47:12 · 4257 阅读 · 4 评论 -
基于spark on yarn with gpu的AI模型推理
现在随着各个企业积极的拥抱AI技术,那么其中一项关键的环节就是基于AI技术训练得到的各种模型对具体业务问题进行推理(model infer or prediction). 针对这个问题, 我想给大家分享一个基于spark on yarn with gpu的方案,能够充分的利用spark的大数据处理能力以及hadoop yarn的gpu调度的能力,轻易的扩展到更大的数据量以及更多的gpu并发支持。...原创 2020-02-05 10:44:03 · 3342 阅读 · 0 评论