全文索引xunsearch的详细讲解及sphinx的比较(笔记1)

转载 2017年08月15日 11:52:16
一、获取:
xunsearch下载地址: http://www.xunsearch.com/site/download。
linux命令行下载:wget http://www.xunsearch.com/download/xunsearch-full-latest.tar.bz2 
解压:tar -xjf xunsearch-full-latest.tar.bz2
 
二、安装:
根据提示进行操作,输入 xunsearch 软件包的安装目录,这里最好把xunsearch单独放在一个目录下。
cd xunsearch-full/
sh setup.sh
 
三、启动
启动/重新启动 xunsearch 的后台服务$prefix 替换为你的xunsearch安装目录
cd $prefix; 
bin/xs-ctl.sh restart
添加到开机启动脚本,在 Linux 系统中将脚本指令$prefix/bin/xs-ctl.sh restart写进 /etc/rc.local 即可
 
四、xunsearch项目配置文件详解
 
项目名称 project.name = AppName
默认字符集 project.default_charset = UTF-8
定义字段[field_name]
type 字段类型
  1. string 字符型,适用多数情况,也是默认值
  2. numeric 数值型,包含整型和浮点数,仅当字段需用于以排序或区间检索时才设为该类型,否则请使用 string 即可
  3. date 日期型,形式为 YYYYmmdd 这样固定的 8 字节,如果没有区间检索或排序需求不建议使用
  4. id 主键型,确保每条数据具备唯一值,是索引更新和删除的凭据,每个搜索项目必须有且仅有一个 id 字段,该字段的值不区分大小写
  5. title 标题型,标题或名称字段,至多有一个该类型的字段
  6. body 内容型,主内容字段, 即本搜索项目中内容最长的字段,至多只有一个该类型字段,本字段不支持字段检索
 
五、weight 混合区检索时的概率权重在混合检索时,可以对标题和内容等不同字段进行权重计算,如果你不想该字段参与计算权重可设为 0 。通常默认值为 1 ,但 title 型默认为 5 而 body 型则固定为 1 。
weight = 1
 
六、index 索引方式
  1. none 不做索引,所有的搜索匹配均与本字段无关,这个字段只用于排序或搜索结果展示用到。
  2. self 字段索引,可以在搜索时用 field:XXX 来检索本字段
  3. mixed 混合区索引,不标明字段的默认搜索也可以检索本字段 
  4. both 相当于 self + mixed,两种情况均索引
 
七、搜索相关代码
require '$prefix/sdk/php/lib/XS.php';
$xs = new XS('demo'); // 建立 XS 对象,项目名称为:demo 
$search = $xs->search; // 获取 搜索对象
//搜索语句
$query = '项目测试'; // 这里的搜索语句很简单,就一个短语 
$search->setQuery($query); // 设置搜索语句
$search->addWeight('subject', 'xunsearch'); // 增加附加条件:提升标题中包含 'xunsearch' 的记录的权重
$search->setLimit(5, 10); // 设置返回结果最多为 5 条,并跳过前 10 条
$docs = $search->search(); // 执行搜索,将搜索结果文档保存在 $docs 数组中
$count = $search->count(); // 获取搜索结果的匹配总数估算值
 
八、xunsearch原理说明
当你安装完xunsearch之后,会有两个(服务)软件启动
  1. 索引服务或者说索引服务器(是建立在xapian核心上的),然后它会监听一个端口,他负责维护索引文件或者说索引表(索引的增,删);
  2. 搜索服务或者说搜索服务器(scws分词器核心上),它也会监听一个端口,他负责根据客户提交过来的数据的 进行分词,到索引表中查询得到相关数据的id(这里的id是主键索引),然后再到数据库中查询,然后返回结果集。
  3. 知道他的原理之后,程序员怎么按照上面的发送命令呢,即xunsearch提供的php sdk,我们程序员只要根据sdk中api就可以了,所以开发就简单了。
  4. 官网架构截图
  5. 补冲说明:经过本人测试发现,xunsearch与sphinx原理上略有不同,xunsearch当然在创建索引时,其实他是创建了一个自己的数据库, 如果你用xunsearch去查寻数据时,他不会再到你的mysql数据库中去查寻了,而是直接到它本身的数据库中去查寻,然后返回数据,而sphinx 不是这样的,sphinx创建一些索引文件(索引表),然后通过sphinx去查寻数据时,首先他到索引文件查寻数据,然后返回的是当前要查寻数据的 id(这里id是主键),然后再通过id去到mysql数据中查寻数据,然后再返回给数据。
 
九、xunsearch与sphinx的比较
 
9.1、共同点:
两者都可以基于MySQL,都是基于C/C++开发的。Xunsearch是国内开源团队基于国外的Xapian,所有有些是直接基于Xapian和Sphinx的比较。
 
9.2、区别:
9.2.1、单一索引最大记录:Sphinx: 1亿条记录
建立索引的速度:
Sphinx: 100万条记录/3~4分钟,1000玩条记录/50分钟内
Xunsearch: 1万条距离/4.14分钟
 
9.2.2、 查询速度:
Sphinx: 1千万条记录下为0.x秒(毫秒级)
Xunsearch: 100万条记录为0.5秒
 
9.2.3、分布式搜索:
Sphinx: 支持
Xunsearch: 未发现相关文档
 
9.2.4、对中文支持:
Xunsearch > Sphinx,Xunsearch支持拼音搜索
 
9.2.5、使用简单化:
Xunsearch > Sphinx



+=================================================+
| Installation completed successfully, Thanks you |
| 安装成功,感谢选择和使用 xunsearch              |
+-------------------------------------------------+
| 说明和注意事项:                                |
| 1. 开启/重新开启 xunsearch 服务程序,命令如下: |
|    /usr/local/xunsearch/bin/xs-ctl.sh restart
|    强烈建议将此命令写入服务器开机脚本中         |
|                                                 |
| 2. 所有的索引数据将被保存在下面这个目录中:     |
|    /usr/local/xunsearch/data
|    如需要转移到其它目录,请使用软链接。         |
|                                                 |
| 3. 您现在就可以在我们提供的开发包(SDK)基础上    |
|    开发您自己的搜索了。                         |
|    目前只支持 PHP 语言,参见下面文档:          |
|    /usr/local/xunsearch/sdk/php/README
+=================================================+

相关文章推荐

从安装到demo,商品按照标签相关度排序解决方案之开源全文检索引擎xunsearch

公司老总昨天提出了一个需求,希望根据商品的风格标签来推荐相关商品,越是标签相同高的商品就排序在前。 一个商品可能有多个标签。比如:嘻哈、激情派、牛仔,那么有这三个标签的商品就优先显示。 以前看过有...
  • longxuu
  • longxuu
  • 2013年03月21日 21:37
  • 1621

Xunsearch与Sphinx的预比较

参考网站:http://blog.csdn.net/headman/article/details/7695906
  • wzm112
  • wzm112
  • 2014年08月27日 11:39
  • 733

sql全文索引 sphinx

  • 2016年02月23日 13:59
  • 9.02MB
  • 下载

mysql全文索引笔记1

full-text MySQL支持全文索引(Full-Text) 已经很久了,目前,fulltext是一种只适用于MyISAM表的一个索引类型, 而且对定义索引列的数据类型也有限制,只能是以下三种的组...

Sphinx全文索引安装教程

一,Windows下安装Sphinx1,开始前的准备工作来源:http://www.coreseek.cn/products/ft_down/下载csft3.1:http://www.coreseek...
  • lyd518
  • lyd518
  • 2011年07月13日 23:43
  • 1104

sphinx全文索引教程

英文介绍:http://www.sphinxsearch.com/docs/manual-0.9.9.html 一、首先需要在服务器上安装sphinx 在Windows上安装sphinx     1...
  • ikscher
  • ikscher
  • 2013年01月16日 18:39
  • 3923

Sphinx全文索引搜索常见的一些错误处理收集

sphinx无法启动的解决 索引或者查询时提示:ERROR: invalid token in 配置文件 line 1 col 1.: 该提示表示当前的配置文件的编码不是UTF-8(无BOM头...

sphinx简介+全文索引

一.sphinx简介: Sphinx是一个基于SQL的全文检索引擎,可以结合MySQL,PostgreSQL做全文搜索,它可以提供比数据库本身更专业的搜索功能,使得应用程序更容易实现专业化的全文检索...

详解Sql2005 全文索引创建及应用(1)

1.前言14.1  全文索引的介绍14.2  全文索引中常用的术语14.3  全文索引的体系结构14.4  全文目录管理14.4.1  创建全文目录14.4.2  查看与修改全文目录14.4.3  删...
  • y_h_t
  • y_h_t
  • 2011年01月06日 18:09
  • 1301

MySQL全文索引Match Against与Like比较

[原文地址:http://blog.csdn.net/zyz511919766/article/details/12780173] 1.概要 InnoDB引擎对FULLTEXT...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:全文索引xunsearch的详细讲解及sphinx的比较(笔记1)
举报原因:
原因补充:

(最多只允许输入30个字)