- 博客(47)
- 资源 (19)
- 收藏
- 关注
转载 solr Repeater(中转器)
当你的系统很庞大的时候可能会有很多个slave节点,这样如果每个slave节点都从远程下载索引会耗尽带宽。解决这个问题就需要用到Repeater这个概念,Repeater就是将master和slave配置到一个服务器上。这样一个slave负责从远程master上下载索引,局域网内其他的slave从这个Repeater上下载。
2015-08-31 16:25:35 601
转载 solr管理配置,关于数据导入,集群复制及日志配置
文章摘自:http://blog.csdn.net/nickwar/article/details/82361871 日志设置默认solr的日志级别为为info,在使用过程中会产生大量日志,特别是多核情况下,启动速度和响应速度也会被拖慢日志级别的设置方法,一是在admin页中临时设置,略去不表另外就是在java虚拟机启动的参数中设置,对于weblogic
2015-08-27 15:49:19 782
转载 SolrCloud之分布式索引及与Zookeeper的集成
文章摘自:http://www.bubuko.com/infodetail-923588.html一、概述Lucene是一个Java语言编写的利用倒排原理实现的文本检索类库,Solr是以Lucene为基础实现的文本检索应用服务,SolrCloud是Solr4.0版本开发出的具有开创意义的基于Solr和Zookeeper的分布式搜索方案,主要思想是使用Zookeeper作为集群的
2015-08-27 15:33:17 1027
转载 solr4.7新建core
文章转自:http://blog.csdn.net/clj198606061111/article/details/21288499/solr里面的core就像数据库里面的一个表,用来管理索引和相关配置。一、使用示例core下载的solr完整包里面solr-4.7.0\example\multicore这个文件夹下面有2个示例core;分别是core0和core1;如下
2015-08-27 10:14:27 418
转载 Tomcat指定JAVA_HOME而不用环境变量
Tomcat默认情况下会用系统的环境变量中找到JAVA_HOME和JRE_HOME。但是有的时候我们需要不同版本的JDK共存。 可以在${TOMCAT_HOME}/bin/setclasspath.bat最前面设置JAVA_HOME和JRE_HOME。 例如: Js代码 rem
2015-08-26 15:11:09 799
转载 solr与zookeeper搭建solrcloud分布式索引服务实例
安装前准备http://mirrors.hust.edu.cn/apache/zookeeper/ http://apache.fayea.com/apache-mirror/tomcat/tomcat-7/v7.0.55/src/ https://issues.apache.org/jira/secure/attachment/12436620/ZooIn
2015-08-26 15:06:48 575
转载 solrCloud分布式检索流程图
引用请声明原文:http://blog.csdn.net/duck_genuine/article/details/17014991solrCloud分布式检索主要流程如下:
2015-08-26 09:45:00 1370
转载 SolrJ 操作HttpSolrServer, ConcurrentUpdateSolrServer和CloudSolrServer
问题导读:1、如何实现SolrJ线程池连接数据库?2、如何实现SolrJ的CRUD操作?HttpSolrServer 使用了Apache Commons HTTP客户端来连接Solr. 注意在Solr 4.x中,CommonsHttpSolrServer已经改变为HttpSolrServer以及StreamingUpdateSolrServer已经改变为Concur
2015-08-25 19:21:54 3724
转载 Solrj操作Solr4.0 中CloudSolrServer
Solrj操作Solr4.0 中CloudSolrServer的一般过程一、准备工作:创建eclipse工程1. 下载solr4.0_src的源码包,解压后,进入目录中,在命令行执行:ant eclipse 则可以生成一个eclipse工程,会在目录中多了关于eclipse工程的文件:.classpath 和 .project;在eclipse导入该生成的工程(
2015-08-25 18:46:22 663
转载 CloudSolrServer
在solrcloud出来之前,如果通过solrj连接solrserver,需要程序自己实现一致性hash.新版本的solr支持cloud的部署方式,可以自动实现lb和sharding的功能(通过CloudSolrServer类连接cloud),可以用下面代码做测试需要的jar包如下:12345678
2015-08-25 18:23:35 2278
转载 结合Apache和Tomcat实现集群和负载均衡
自己是根据下面的文章去配置的,有一点需要提醒在workers.properties中配置tomcat的host的时候,如果是在本机的话,我们常喜欢使用localhost,但是有时候localhost不好使,要用127.0.0.1就因为这个让我多花了一些时间文章转自:http://blog.csdn.net/kypfos/article/details/3081330也可以参
2015-08-20 16:17:12 342
转载 solr no servers hosting shard 503 SolrCloud分布式检索时忽略宕机的Shard
“no servers hosting shard:503” 加入下面参数,只从存活的shards获取数据:shards.tolerant=true例如:explicittrue10text 没有打此参数,如果集群内有挂掉的shard,将显示:no servers hosting shard
2015-08-18 16:43:06 4057
转载 更改Tomcat startup.bat启动窗口名称
通常在Tomcat bin目录下用startup.bat启动Tomcat ,启动窗口显示的Title是Tomcat 如果遇到一个服务器上多个Tomcat的话就会容易混淆。更改方法如下:1 在bin目录下找到catalina.bat ,用记事本打开2 找到 if "%TITLE%" == "" set TITLE=Tomcat 这句3 把 set
2015-08-18 11:16:43 676
转载 深入理解Java中为什么内部类可以访问外部类的成员
文章转载:http://blog.csdn.net/zhangjg_blog/article/details/20000769内部类简介虽然Java是一门相对比较简单的编程语言,但是对于初学者, 还是有很多东西感觉云里雾里, 理解的不是很清晰。内部类就是一个经常让初学者感到迷惑的特性。 即使现在我自认为Java学的不错了, 但是依然不是很清楚。其中一个疑惑就是为什么内部
2015-08-18 09:01:24 487
转载 分布式文件系统FastDFS架构剖析
文章转自:http://os.51cto.com/art/201205/335144_all.htmFastDFS是一款类GoogleFS的开源分布式文件系统,它用纯C语言实现,支持Linux、FreeBSD、AIX等UNIX系统。它只能通过专有API对文件进行存取访问,不支持POSIX接口方式,不能mount使用。准确地讲,GoogleFS以及FastDFS、mogileFS
2015-08-17 16:58:34 794
转载 分布式文件系统FastDFS原理介绍
文章转自:http://os.51cto.com/art/201210/359380.htmFastDFS是一个开源的轻量级分布式文件系统。它解决了大数据量存储和负载均衡等问题。特别适合以中小文件(建议范围:4KB AD:什么是FastDFS?FastDFS是一个开源的轻量级分布式文件系统。它解决了大数据量存储和负载均衡等问题。特
2015-08-17 16:46:25 642
转载 分布式全文检索系统SolrCloud简介
文章转自:http://my.oschina.net/004/blog/175768前言本文简单描述SolrCloud的特性,基本结构和入门,基于Solr4.5版本。Lucene是一个Java语言编写的利用倒排原理实现的文本检索类库。Solr是以Lucene为基础实现的文本检索应用服务。SolrCloud是Solr4.0版本开发出的具有开创意义的基于Solr
2015-08-14 16:51:08 559
转载 Tika
1. Tika类 (1)tika类的基本用法detect:获取文档格式String detect(File | String | URL | InputStream)parse:获取Reader(Lucene的Field取值的参数,提供Reader是用于解决字符串过大的问题) parse(File | String | U
2015-08-14 13:29:05 1216
转载 Solr 文章集成
文章转自:http://blog.csdn.net/zhaoyue007101/article/details/47130007Solr 文章集成solr原理 solr wiki: http://wiki.apache.org/solr/分布式全文检索系统SolrCloud简介 http://my.oschina.net/004/blog/175768collectio
2015-08-14 13:16:40 457
转载 利用 Commons-Fileupload 实现文件上传
文章转自:http://www.blogjava.net/kiant/articles/232301.html一、准备:1、 下载 commons-fileupload 库,下载地址:http://commons.apache.org/fileupload/2、 下载 commons-fileupload 依赖库 commons-io,下载地址:http://commons.a
2015-08-14 11:06:28 6215 2
转载 oracle ORA-01002: fetch out of sequence tips 违反提取顺序
The Oracle oerr utility notes this on the ora-01002 error:ORA-01002: fetch out of sequenceCause: This error means that a fetch has been attempted from a cursor which is no longer valid. N
2015-08-14 10:18:56 4429
转载 JAVA完全控制Oracle中BLOB、CLOB说明 [转]
网络上很多关于JAVA对Oracle中BLOB、CLOB类型字段的操作说明,有的不够全面,有的不够准确,甚至有的简直就是胡说八道。最近的项目正巧用到了这方面的知识,在这里做个总结。环境:Database: Oracle 9iApp Server: BEA Weblogic 8.14表结构:CREATE TABLE TESTBLOB (ID Int, NAME Varchar2(
2015-08-14 10:13:37 564
原创 solr4.7.2 索引远程文件内容
我的项目需求如下,一张数据库表是存储我们上传的文档附件的,其中有一个字段fileurl是该附件下载的连接url,要求通过dih的方式将该连接对应的文档内容索引下来。首先在网上看了下面的三个博客文章挺有用的。http://iamyida.iteye.com/blog/2214905跟益达学Solr5之索引文件夹下所有文件http://iamyida.iteye.com
2015-08-13 11:13:26 3013 1
转载 点滴记录——Ubuntu 14.04中Solr与Tomcat整合安装
转载请说明出处:http://blog.csdn.net/cywosp/article/details/389659811. 安装jdk,tomcat sudo apt-get install tomcat7 openjdk-7-jdk openjdk-7-jre2. 到http://lucene.apache.org/solr/下载最新的solr,注意别
2015-08-13 10:27:57 347
转载 使用Apache Solr对数据库建立索引(包括处理CLOB、CLOB)
以下资料整理自网络,觉的有必要合并在一起,这样方便查看。主要分为两部分,第一部分是对《db-data-config.xml》的配置内容的讲解(属于高级内容),第二部分是DataImportHandler(属于基础),第三部分是对db-data-config.xml的进阶(这个国内可能还没有人写过啊,我在google、baidu上都没有搜索到,最后可是拔代码,看solr的英文文档找的)第一部
2015-08-12 16:33:54 578
转载 solr-4.7.2目录和配置
先来看一个目录结构图1、SolrHome上一节我们用java -jar start.jar启动solr,默认的,start.jar用jetty启动solr会用到默认的solr home目录"./solr/",相对于工作目录(这里就是solr-4.7.2\example\目录),如果我们要运行别的例子,需要在启动jetty时指定别的solr.s
2015-08-12 15:49:39 668
转载 solr总结 第四部分:solr配置文件详解
关于solr配置文文件我所理解的,大部分都是可以在网上查到的。所以主要列举下一些网上大家谈的很少的知识。1.solrconfig.xml配置文件(略)这个文件,我没做很深入的研究。只有一点说明,solr1.3和solr1.4是有区别的solr1.3里面,需要指定solr index date的位置Xml代码 other than the
2015-08-12 15:35:52 1500
转载 企业级搜索引擎Solr 第三章 索引数据(Indexing Data)[2]
文章转自:http://quweiprotoss.blog.163.com/blog/static/4088288320129262412997/?utm_source=tuicoolThe Data Import Handler Framework Solr有一个非常流行的contrib模块DataImportHandler(DIH),它是用于导入数据的。它是
2015-08-12 11:09:03 1151
转载 QPS 与 TPS
QPS:Queries Per Second意思是“每秒查询率”,是一台服务器每秒能够响应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 TPS是TransactionsPerSecond的缩写,也就是事务数/秒。它是软件测试结果的测量单位。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。客户机在发送请求时开始计时,收到服务器响应后结束计时,以此
2015-08-11 08:49:12 388
转载 solr4性能优化实践参考
Solr的性能在solr4版本之后的得到了极大的提升,在使用过程中,尽量使用新的版本,在实践中总结的一些性能优化参考,不同的业务场景需求,优化的方式会不一样。在设计field schema的时,需要关注indexed、stored、omitNorms这几个属性的值;indexed对索引的内存使用,segment的合并,索引的optimize,以及索引的大小都有影响,所以对于不需要索引的字段
2015-08-10 16:29:03 1407
转载 SOLR问答
问:1、我看有的人这么写indexed = true ,stroed=false,还有人写indexed=false,stored=true,我有点不明白,可以索引,为什么不存储呢?那有一篇文章,有10万字,设置为indexed = true ,stroed=false,那占不占空间啊? 说到底,还是不明白index和store的意思 答:索引储存的是分词之后的结果,一项、一项存储的,不是
2015-08-10 16:00:04 501
转载 指尖上的电商---(6)solrconfig.xml配置详解
solrconfig.xml配置文件主要定义了SOLR的一些处理规则,包括索引数据的存放位置,更新,删除,查询的一些规则配置。 可以在tomcat的安装路径下找到这个文件C:\Program Files\Apache Software Foundation\Tomcat 8.0\solr\collection1\conf 1.datadir节点
2015-08-10 15:43:12 554
转载 Solr Cache使用介绍及分析
本文将介绍Solr查询中涉及到的Cache使用及相关的实现。Solr查询的核心类就是SolrIndexSearcher,每个core通常在同一时刻只由当前的SolrIndexSearcher供上层的handler使用(当切换SolrIndexSearcher时可能会有两个同时提供服务),而Solr的各种Cache是依附于SolrIndexSearcher的,SolrIndexSearcher在则C
2015-08-10 15:38:45 431 1
转载 Solr 缓存配置
Solr缓存与Solr的索引搜索器(SolrIndexSearcher)息息相关的,而众所周知,索引的结构很难做出大的变动,效率也是板上钉钉的事情。因此提高索引搜索器的使用效率,使之在任何缓存都能够高效并可重用是目前需要我们去做的工作。在Solr中所提到的缓存和我们平常遇到的缓存不同。在Solr中的缓存对象将不会在一段时间之后过期,也就是说,只要索引搜索器是存在的,那么高速缓存对象也一定存在。
2015-08-10 14:48:26 2912
转载 什么是filtercache
solr应用中为了提高查询速度有可以利用几种cache来优化查询速度,分别是fieldValueCache,queryResultCache,documentCache,filtercache,在日常使用中最为立竿见影,最有效的应属filtercache,何谓filtercache?这个需要从一段solr的查询日志开始说起,下面是我截取的solr运行中打印的一段查询日志:[search4ali
2015-08-10 14:41:24 539
转载 Solr缓存介绍
转自:http://www.blogjava.net/conans/articles/380684.html本文将介绍Solr查询中涉及到的Cache使用及相关的实现。Solr查询的核心类就是SolrIndexSearcher,每个core通常在 同一时刻只由当前的SolrIndexSearcher供上层的handler使用(当切换SolrIndexSearcher时可能会
2015-08-10 14:11:14 513
转载 Tomcat性能调优
说明:文章转自http://blog.csdn.net/lifetragedy/article/details/7708724,如有侵权,请联系我,我会及时处理。一、JVM(内存)的优化32位操作系统与64位操作系统中JVM的对比我们一般的开发人员,基本用的是都是32位的Windows系统,这就导致了一个严重的问题即:32位windows系统对内存限制,下面先来看一
2015-08-07 10:54:58 487
转载 tomcat性能调优(高并发)
Tomcat 默认配置的最大请求数是 150,也就是说同时支持 150 个并发,当然了,也可以将其改大。当某个应用拥有 250 个以上并发的时候,应考虑应用服务器的集群。具体能承载多少并发,需要看硬件的配置,CPU 越多性能越高,分配给 JVM 的内存越多性能也就越高,但也会加重 GC 的负担。操作系统对于进程中的线程数有一定的限制:Windows 每个进程中的线程
2015-08-07 10:33:12 804
转载 修改Tomcat Connector运行模式,优化Tomcat运行性能
Tomcat是一个小型的轻量级应用服务器,也是JavaEE开发人员最常用的服务器之一。不过,许多开发人员不知道的是,Tomcat Connector(Tomcat连接器)有bio、nio、apr三种运行模式,那么这三种运行模式有什么区别呢,我们又如何修改Tomcat Connector的运行模式来提高Tomcat的运行性能呢?下面,我们先大致了解Tomcat Connector的三
2015-08-07 10:30:16 389
转载 Tomcat启动内存设置
最近在公司做了一个j2ee+tomcat的小项目,涉及到tomcat加载类的内存配置,网上搜了半天,再经过自己总结,终于知道怎么一回事了,下面分享一下我的经验,有不对的地方大家可以一起讨论。Tomcat的启动分为startupo.bat启动和注册为windows服务的启动,下面一一说明。1.startup.bat启动在tomcat_home/bin目录下找到catalina
2015-08-07 10:29:11 367
画流程图的软件DiagramDesigner
2011-05-16
割顶,割边,连通分支割顶,割边,连通分支
2011-04-30
图论——支撑树图论——支撑树图论——支撑树
2011-04-30
浙江大学acm,吉林大学acm模板
2011-04-30
浙大android教学
2011-04-30
word格式转换成pdf格式
2011-04-08
ER_designer
2011-04-07
android资料4
2011-04-02
android资料3
2011-04-02
浙大算法包,几何 结构\数论\数值计算\图论_NP搜索\图论_连通性\图论_匹配\组合\
2009-04-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人