Solr(二)创建索引和查询索引的基本应用

最新推荐文章于 2021-02-16 04:10:52 发布
最新推荐文章于 2021-02-16 04:10:52 发布
阅读量73 收藏
点赞数
文章标签： java python 人工智能
原文链接：https://my.oschina.net/sourcecoding/blog/115763
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

基础内容可见solr wiki ： http://wiki.apache.org/solr/Solrj

1.根据数据库对象属性创建schedule.xml中的属性字段 


<field name="id" type="string" indexed="true" stored="true" required="true" multiValued="false"/>
   <field name="product_id" type="string" indexed="false" stored="true" required="true" multiValued="false"/>
   
   <field name="category_attribute" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_design" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_material" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_name_cn" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_sku" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_title" type="smartCnText" indexed="true" stored="true"/>
   <field name="sale_count" type="string" indexed="true" stored="true"/>
   <field name="create_time" type="string" indexed="false" stored="true"/>
   <field name="current_price" type="string" indexed="false" stored="true"/>
   <field name="sale_price" type="string" indexed="true" stored="true"/>
   <field name="market_price" type="string" indexed="true" stored="true"/>
   <field name="bigcate_name" type="smartCnText" indexed="true" stored="true"/>
   <field name="brand_name" type="smartCnText" indexed="true" stored="true"/>
   <field name="brand_code" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_color" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_size" type="smartCnText" indexed="true" stored="true"/>
   <field name="picture_path" type="string" indexed="false" stored="true"/>
   <field name="page_path" type="string" indexed="false" stored="true"/>
   <field name="material_art" type="smartCnText" indexed="true" stored="true"/>
   <field name="material_out" type="smartCnText" indexed="true" stored="true"/>
   <field name="material_in" type="smartCnText" indexed="true" stored="true"/>
   <field name="material_filter" type="smartCnText" indexed="true" stored="true"/>
   <field name="filter_weight" type="smartCnText" indexed="true" stored="true"/>
   <field name="product_keyword" type="smartCnText" indexed="true" stored="true"/>
   
   <field name="text" type="smartCnText" indexed="true" stored="true" multiValued="true"/>
   
   <field name="_version_" type="long" indexed="true" stored="true"/>

<uniqueKey>id</uniqueKey>
 <defaultSearchField>text</defaultSearchField>
 
   <copyField source="category_attribute" dest="text"/>
   <copyField source="product_design" dest="text"/>
   <copyField source="product_material" dest="text"/>
   <copyField source="product_name_cn" dest="text"/>
   <copyField source="product_sku" dest="text"/>
   <copyField source="product_title" dest="text"/>
   <copyField source="bigcate_name" dest="text"/>
   <copyField source="brand_name" dest="text"/>
   <copyField source="product_color" dest="text"/>
   <copyField source="product_size" dest="text"/>
   <copyField source="material_art" dest="text"/>
   <copyField source="material_out" dest="text"/>
   <copyField source="material_in" dest="text"/>
   <copyField source="material_filter" dest="text"/>
   <copyField source="filter_weight" dest="text"/>
   <copyField source="product_keyword" dest="text"/>
   <copyField source="current_price" dest="text"/>

2.使用solrj创建索引 



package com.vegaga.sou.index.service.impl;

import java.util.ArrayList;
import java.util.List;

import org.apache.solr.common.SolrInputDocument;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;

import com.vegaga.common.StringUtils;
import com.vegaga.common.product.PriceUtils;
import com.vegaga.domain.product.VgProduct;
import com.vegaga.domain.product.VgProductDetail;
import com.vegaga.domain.product.VgProductSku;
import com.vegaga.service.VgProductSkuService;
import com.vegaga.sou.index.service.VgProductSkuIndexService;

@Service("vgProductSkuIndexService")
public class VgProductSkuIndexServiceImpl implements VgProductSkuIndexService {
	
	private static final String SEARCH_PRODUCT_ID = "product_id";
	/**末端分类属性名*/
	private static final String SEARCH_CATEGORY_ATTRIBUTE = "category_attribute";
	/**图案*/
	private static final String SEARCH_PRODUCT_DESIGN = "product_design";
	/**材质*/
	private static final String SEARCH_PRODUCT_MATERIAL = "product_material";
	/**商品名称*/
	private static final String SEARCH_PRODUCT_NAME_CN = "product_name_cn";
	/**商品SKU*/
	private static final String SEARCH_PRODUCT_SKU = "product_sku";
	/**商品标题*/
	private static final String SEARCH_PRODUCT_TITLE = "product_title";
	/**商品销量*/
	private static final String SEARCH_SALE_COUNT = "sale_count";
	/**创建时间*/
	private static final String SEARCH_CREATE_TIME = "create_time";
	/**当前价格*/
	private static final String SEARCH_CURRENT_PRICE = "current_price";
	/**卖价*/
	private static final String SEARCH_SALE_PRICE = "sale_price";
	/**市场价*/
	private static final String SEARCH_MARKET_PRICE = "market_price";
	/**商品大分类*/
	private static final String SEARCH_SKU_BIGCATE_NAME = "bigcate_name";
	/**品牌名称*/
	private static final String SEARCH_BRAND_NAME = "brand_name";
	/**品牌code*/
	private static final String SEARCH_BRAND_CODE = "brand_code";
	/**商品颜色*/
	private static final String SEARCH_PRODUCT_COLOR = "product_color";
	/**商品尺寸*/
	private static final String SEARCH_PRODUCT_SIZE = "product_size";
	/**商品图片路径*/
	private static final String SEARCH_SKU_PICTURE_PATH = "picture_path";
	/**商品页面路径*/
	private static final String SEARCH_SKU_PAGE_PATH = "page_path";
	private static final String SEARCH_PRODUCT_MATERIAL_ART = "material_art";
	private static final String SEARCH_PRODUCT_MATERIAL_OUT = "material_out";
	private static final String SEARCH_PRODUCT_MATERIAL_IN = "material_in";
	private static final String SEARCH_PRODUCT_MATERIAL_FILTER = "material_filter";
	private static final String SEARCH_FILTER_WEIGHT = "filter_weight";
	private static final String SEARCH_PRODUCT_KEYWORD = "product_keyword";
	
	private static final String SEARCH_PRODUCT_TEXT = "text";
	
	
	
	VgProductSkuService vgProductSkuService;
	
	@Autowired
	public void setVgProductSkuService(VgProductSkuService vgProductSkuService) {
		this.vgProductSkuService = vgProductSkuService;
	}
	
	@Override
	public List<SolrInputDocument> addVgProductSkuIndex() {
		List<SolrInputDocument> documents = new ArrayList<SolrInputDocument>();
		List<VgProductSku> vgProductSkus = vgProductSkuService.getAll();
		if(vgProductSkus != null){
			for(VgProductSku vgProductSku : vgProductSkus){
				System.out.println("load"+vgProductSku);
				VgProduct vgProduct = vgProductSku.getVgProduct();
				VgProductDetail vgProductDetail = vgProduct.getVgProductDetail();
				SolrInputDocument document = new SolrInputDocument();
				try{
					document.addField("id", vgProductSku.getId().toString());
					document.addField(SEARCH_PRODUCT_ID, vgProduct.getId().toString());//不做索引
					document.addField(SEARCH_CATEGORY_ATTRIBUTE, StringUtils.nullToEmpStr(vgProduct.getCategoryAttribute()));
					document.addField(SEARCH_PRODUCT_DESIGN, StringUtils.nullToEmpStr(vgProduct.getDesign()));
					document.addField(SEARCH_PRODUCT_MATERIAL, StringUtils.nullToEmpStr(vgProduct.getMaterial()));
					document.addField(SEARCH_PRODUCT_NAME_CN, StringUtils.nullToEmpStr(vgProduct.getProductNameCn()));
					
					document.addField(SEARCH_PRODUCT_SKU, StringUtils.nullToEmpStr(vgProductSku.getProductSku()));
					document.addField(SEARCH_PRODUCT_TITLE, StringUtils.nullToEmpStr(vgProductSku.getProductSkuTitle()));
					document.addField(SEARCH_SALE_COUNT, StringUtils.nullToEmpStr(vgProductSku.getSaleCount()));
					document.addField(SEARCH_CREATE_TIME, StringUtils.nullToEmpStr(vgProductSku.getCreateTime()));
					document.addField(SEARCH_CURRENT_PRICE, PriceUtils.getCurrentPrice(vgProductSku).toString());
					document.addField(SEARCH_SALE_PRICE, vgProductSku.getSalePrice().toString());
					document.addField(SEARCH_MARKET_PRICE, vgProductSku.getMarketPrice().toString());
					document.addField(SEARCH_SKU_BIGCATE_NAME, StringUtils.nullToEmpStr(vgProductSku.getSkuBigCateName()));
					document.addField(SEARCH_BRAND_NAME, StringUtils.nullToEmpStr(vgProductSku.getBrandName()));
					document.addField(SEARCH_BRAND_CODE, StringUtils.nullToEmpStr(vgProductSku.getBrandCode()));
					document.addField(SEARCH_PRODUCT_COLOR, StringUtils.nullToEmpStr(vgProductSku.getProductColor()));
					document.addField(SEARCH_PRODUCT_SIZE, StringUtils.nullToEmpStr(vgProductSku.getProductSize()));
					document.addField(SEARCH_SKU_PICTURE_PATH, StringUtils.nullToEmpStr(vgProductSku.getSkuPicturePath()));
					document.addField(SEARCH_SKU_PAGE_PATH, StringUtils.nullToEmpStr(vgProductSku.getSkuPagePath()));
					
					document.addField(SEARCH_PRODUCT_MATERIAL_ART, StringUtils.nullToEmpStr(vgProductDetail.getMaterialArt()));
					document.addField(SEARCH_PRODUCT_MATERIAL_OUT, StringUtils.nullToEmpStr(vgProductDetail.getMaterialOut()));
					document.addField(SEARCH_PRODUCT_MATERIAL_IN, StringUtils.nullToEmpStr(vgProductDetail.getMaterialIn()));
					document.addField(SEARCH_PRODUCT_MATERIAL_FILTER, StringUtils.nullToEmpStr(vgProductDetail.getMaterialFiller()));
					document.addField(SEARCH_FILTER_WEIGHT, StringUtils.nullToEmpStr(vgProductDetail.getFillerWeight()));
					document.addField(SEARCH_PRODUCT_KEYWORD, StringUtils.nullToEmpStr(vgProductDetail.getKeyWord()));
					
					document.addField(SEARCH_PRODUCT_TEXT, "");
					documents.add(document);
				}catch(Exception e){
					//e.printStackTrace();
				}
			}
		}
		return documents;
	}
	
}


package com.vegaga.sou.task;

import java.io.IOException;

import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.springframework.beans.factory.annotation.Autowired;

import com.vegaga.sou.index.service.VgProductSkuIndexService;

public class AddIndexToSolrTask {
	
	VgProductSkuIndexService vgProductSkuIndexService;
	
	@Autowired
	public void setVgProductSkuIndexService(VgProductSkuIndexService vgProductSkuIndexService) {
		this.vgProductSkuIndexService = vgProductSkuIndexService;
	}

	public void addIndexToSolr(){
		HttpSolrServer server = new HttpSolrServer("http://127.0.0.1:8081/solr");
		try {
			server.deleteByQuery("*.*");
			server.add(vgProductSkuIndexService.addVgProductSkuIndex());
			server.commit();
		} catch (SolrServerException e) {
			e.printStackTrace();
		} catch (IOException e) {
			e.printStackTrace();
		}
	}

}
3.读取索引信息 
package com.vegaga.sou.task;

import org.apache.solr.client.solrj.SolrQuery;
import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocument;

public class AddIndexToSolrTaskSearchTest {
	
	public static void main(String[] args) {
		HttpSolrServer server = new HttpSolrServer("http://localhost:8081/solr");
		SolrQuery query = new SolrQuery();
		query.setQuery("106203");
		QueryResponse resp = null;
		try {
			resp = server.query(query);
			for(SolrDocument document : resp.getResults()){
				System.out.println(document.getFieldValue("id"));
				System.out.println(document.getFieldValue("product_id"));
				System.out.println(document.getFieldValue("material_art"));
			}
		} catch (SolrServerException e) {
			e.printStackTrace();
		}
	}

}

转载于:https://my.oschina.net/sourcecoding/blog/115763

weixin_33915554
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
solr创建索引
07-06
索引是设计表的一部分,创建的索引对sql的语句木有任何影响,对sql语句的执行效率有影响
solr 对数据添加索引
06-14 2207
solr对单条的数据添加，无需多讲，只需要按步骤来就可以了 1.单条的添加索引，通过代码   // 添加一条数据     public static void addDoc() throws SolrServerException,IOException {         // 得到请求         SolrClient sc = getSolrClient();
Solr添加索引
dianshanpang3778的博客
02-28 147
发送请求： http://localhost:8080/solr/update/?stream.body= <delete><id>id值</id></delete>&stream.contentType=text/xml;charset=utf-8&commit=true 发送请求： http://localhos...
Solr 6.0 学习（二）创建core并插入索引
upxiaofeng的专栏
05-16 1万+
首先搭建solr环境，如：solr6.0学习（一）环境搭建 修改各种配置文件。 1、修改solrhome下的solr.xml文件 注解掉zookeeper搭建集群配置，我们后面会采用master-slave的形式。 至于zookeeper的形式可以阅读以下这篇文章【solrCloud集群配置指导】：http://www.aboutyun.com/thread-9432-1-1.html
Solr4.7从文件创建索引
热门推荐
都是浮云
03-19 2万+
索引数据源并不会一定来自于数据库、XML、JSON、CSV这类结构化数据，很多时候也来自于PDF、word、html、word、MP3等这类非结构化数据，从这类非结构化数据创建索引，solr也给我们提供了很好的支持，利用的是apache tika。
SOLR的应用教程
04-08
4.4 使用 SolrJ 创建索引 52 4.5 Solrj包的结构说明 53 4.5.1 CommonsHttpSolrServer 53 4.5.2 Setting XMLResponseParser 53 4.5.3 Changing other Connection Settings 53 4.5.4 EmbeddedSolrServer 54 5 Solr的...
开源企业搜索引擎SOLR的应用教程
01-08
Solr是一个基于Lucene...通过对 Solr 进行适当的配置，某些情况下可能需要进行编码，Solr 可以阅读和使用构建到其他 Lucene 应用程序中的索引。此外，很多 Lucene 工具（如Nutch、 Luke）也可以使用 Solr 创建的索引。
solr-web.zip
08-31
本代码主要包含SOLR基本可视化运维，如通过控制套绑定数据库和创建应用搜索实例。支持删除索引和自定义的增量更新。同时具备分词检索能力。 部署方式：1、解压后在源码中修改solr-config.properties配置文件信息，...
solr:Allegro Common Lisp与Solr的接口
05-25
该软件包允许Allegro CL应用程序与正在运行的Solr服务器通信，添加和删除文档以及运行查询以检索索引记录。 该软件包附带一个solr.asd文件。 要使用它，只需加载：solr。 (push #p"path/to/solr/source/directory" ...
dor_indexing_app:斯坦福大学数字对象存储库的索引API
03-11
Dor索引应用 dor_indexing_app是用于将DOR对象索引到Argo索引中的主要API。 有关字段及其用途的更多信息，请参见： : 开发人员设置 为了在笔记本电脑上运行dor_indexing_app（例如，在运行Argo时），您需要 创建...
solr如何建立索引
Java持续实践
07-09 5181
在如上图所示的schema.xml中,配置如下的域.其中 indexed="true" 这个属性,就代表建立了索引
java创建solr索引_项目之solr全文搜索工具之创建项目索引库
weixin_31931045的博客
02-16 160
以创建项目baotao core为例1、 在example目录下创建baotao-solr文件夹；2、 将./solr下的solr.xml拷贝到baotao-solr目录下；3、 在baotao-solr下创建baotao目录，并且在baotao目录下创建conf和data目录；4、 将example\solr\collection1\core.properties文件拷贝到example...
solr添加索引注意事项
Danny_tll的博客
07-15 2070
1、在给json文件添加索引时，注意json的value值，不能为null，所以在生成json文件的时候，会对于值为null的属性，因特殊处理，否则会抛出NullPointerException。2、为json数据添加索引的方式及不同a、在Solr Admin Web页面中添加，一条或多天json记录，应使用下面的方式{"id":1,"name":"name1"}, {"id":2,"name":...
solr中文搜索倒排索引和数据存储结构
指尖岁月，“码”的人生
08-14 329
作为搜索，本文章原地址：http://blog.csdn.net/chunlei_zhang/article/details/38520315我们传统的方式（正排索引）是从关键点出发，然后再通过关键点找到关键点代表的信息中能够满足搜索条件的特定信息，既通过KEY寻找VALUE。而Lucene的搜索则是采用了倒排索引的方式，即通过VALUE找KEY。而在中文全文搜索中VALUE就是我们要搜索的单词，...
常用工具类--solr索引添加 查询 删除
钟晚语夕的专栏
10-17 533
solr常用操作  首先是连接solr服务器： public class solrServer { private solrServer(){}; final static String SOLR_URL = "http://localhost:8080/solr/test"; private static HttpSolrClient server = null; ...
全文索引----创建多表solr索引
nylic的博客
09-24 4064
我们在使用solr作为索引服务器时，通常会将多个表的字段作为联合索引，对多个表之间快速的数据查询也是solr服务器高效率的体现，这篇文章将介绍如何基于多个数据表创建索引：一：没有关联的数据表之间创建索引：1.1数据库准备： 我们使用任意的两张表作为数据源，这两个表可以属于同一个数据库也可以同于不同的数据库，如果使用两个数据库，则需要将两个数据源连接字符串，我们这里使用同一个数据库的两个表作为实例：
Solr学习二索引库的创建
实践出真知
09-08 4711
solr索引库的创建。
Solr学习总结（三）建立第一个索引
夏o漠的博客
05-11 1346
简单建立一个新的索引
solr建立索引
weixin_38898192的博客
09-05 1746
转自：http://blog.csdn.net/u011936655/article/details/51960005 Apache Solr带有一个叫做SimplePostTool独立的Java程序。这个程序被打包成JAR,在安装目录下 example\exampledocs可看到。 现在，我们在命令行定位到example\exampledocs文件夹，然后键入以下命令。你会看到一堆选项
Solr怎么创建索引
最新发布
11-04
2. 创建一个新的Core：在Solr中，Core是一个独立的索引单元，它包含了所有的配置信息和索引数据。 3. 定义Schema：Schema定义了索引中的字段和它们的类型，Solr支持多种类型的字段，如文本、日期、数字等。 4. ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值