es6与java的相似度_计算两个特征向量相似度的插件(es6.1.1-6.3+)

本文档介绍了如何在Elasticsearch中开发一个自定义插件,用于根据用户和商品的特征向量计算相似度,以实现个性化搜索。插件实现了ScriptEngine接口,通过`FeatureVectorScoreSearchScript`类和`FastVectorDistance`类来计算两个向量的余弦相似度。此外,还展示了如何部署和测试这个插件。
摘要由CSDN通过智能技术生成

更改elasticsearch的score评分

在某些情况下,我们需要自定义score的分值,从而达到个性化搜索的目的。例如我们通过机器学习可以得到每个用户的特征向量、同时知道每个商品的特征向量,如何计算这两个特征向量的相似度?这个两个特征向量越高,评分越高,从而把那些与用户相似度高的商品优先推荐给用户。

插件源码解读

通过查看官网文档,运行一个脚步必须通过“ScriptEngine”来实现的。为了开发一个自定义的插件,我们需要实现“ScriptEngine”接口,并通过getScriptEngine()这个方法来加载我们的插件。ScriptEngine接口具体介绍见文献[1].下面通过官网给出的一个具体例子:

private static class MyExpertScriptEngine implements ScriptEngine {

//可以命名自己在脚本api中使用的名称来引用这个脚本后端。

@Override

public String getType() {

return "expert_scripts";

}

//核心方法,下面是通过java的lamada表达式来实现的

@Override

public T compile(String scriptName, String scriptSource, ScriptContext context, Map params) {

if (context.equals(SearchScript.CONTEXT) == false) {

throw new IllegalArgumentException(getType() + " scripts cannot be used for context [" + context.name + "]");

}

// we use the script "source" as the script identifier

if ("pure_df".equals(scriptSource)) {

//通过p来获取参数params中的值,lookup得到文档中的的值

SearchScript.Factory factory = (p, lookup) -> new SearchScript.LeafFactory() {

final String field;

final String term;

{

if (p.containsKey("field") == false) {

throw new IllegalArgumentException("Missing parameter [field]");

}

if (p.containsKey("term") == false) {

throw new IllegalArgumentException("Missing parameter [term]");

}

field = p.get("field").toString();

term = p.get("term").toString();

}

@Override

public SearchScript newInstance(LeafReaderContext context) throws IOException {

PostingsEnum postings = context.reader().postings(new Term(field, term));

if (postings == null) {

// the field and/or term don't exist in this segment, so always return 0

return new SearchScript(p, lookup, context) {

@Override

public double runAsDouble() {

return 0.0d;

}

};

}

return new SearchScript(p, lookup, context) {

int currentDocid = -1;

@Override

public void setDocument(int docid) {

// advance has undefined behavior calling with a docid <= its current docid

if (postings.docID() < docid) {

try {

postings.advance(docid);

} catch (IOException e) {

throw new UncheckedIOException(e);

}

}

currentDocid = docid;

}

@Override

public double runAsDouble() {

if (postings.docID() != currentDocid) {

// advance moved past the current doc, so this doc has no occurrences of the term

return 0.0d;

}

try {

return postings.freq();

} catch (IOException e) {

throw new UncheckedIOException(e);

}

}

};

}

@Override

public boolean needs_score() {

return false;

}

};

return context.factoryClazz.cast(factory);

}

throw new IllegalArgumentException("Unknown script name " + scriptSource);

}

@Override

public void close() {

// optionally close resources

}

}

通过分析上面的代码,我们给出自己的脚步:

开发自己的脚步v1

package com;

import org.apache.logging.log4j.LogManager;

import org.apache.logging.log4j.Logger;

import org.apache.lucene.index.LeafReaderContext;

import org.elasticsearch.script.ScriptContext;

import org.elasticsearch.

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值