PHP 安装 Robbe 中文分词扩展

最新推荐文章于 2024-05-14 09:43:40 发布
最新推荐文章于 2024-05-14 09:43:40 发布
阅读量2.6k 收藏 1
点赞数
PHP 安装 Robbe 中文分词扩展\ 
本文地址：http://blog.aboutc.net/php/59/php-installation-robbe-chinese-word-extension
windows安装编译http://www.oschina.net/question/853816_135216


Starred by  16 user s
Members
Featured
Downloads
Wiki pages
Links

最新动态: robbe-1.6.0发布了

robbe开源中国git托管

一。robbe php开源高性能中文分词扩展

robbe是建立在friso中文分词上的一个高性能php中文分词扩展。了解friso

1.目前最高版本：friso 1.6.0。

2.mmseg四种过滤算法，分词准确率达到了98.41%。

3.详细功能，请访问friso官方首页：friso。

二。分词速度

测试环境：2.8GHZ/2G/Ubuntu

简单模式：3.1M/秒

复杂模式：1.4M/秒

（因为php中的大量字符串的复制，性能比friso有点下降）。

三。使用方法

Linux如何自主编译安装robbe？

Win下如何自己编译安装robbe?

robbe安装ueaner博客

1。下载：

(1).在friso下载下载最新的friso附件。

(2).在robbe下载下载最新的robbe附件。

2.安装：

(1). winNT系统： 复制friso-{version}/lib/win32/下的friso.dll和robbe-{version}/lib/win32/下的php_robbe.dll到php的ext扩展目录下。

(2). linux系统： 同上（或者自己make去安装，先安装friso，在安装robbe）。

(3). php.ini配置：

//1.加入扩展：

extension=php_robbe.dll   //win
extension=php_robbe.so    //linux

//2.加入robbe php配置：

[robbe]
;configuration file for robbe.
robbe.ini_file = friso.ini文件的绝对地址。

3。php测试：

(1).运行phpinfo.php

看到：如下的配置信息表示配置成功了：

             robbe

Robbe Support	enabled
Version	        1.1
Bug Report	chenxin619315@gmail.com
Learn More	http://code.google.com/p/robbe
C Edition	http://code.google.com/p/friso
Java Edition	http://code.google.com/p/jcseg

Directive	Local Value	Master Value
robbe.ini_file	friso.ini地址	friso.ini地址

(2).运行robbe_php下的两个php文件,你懂得。

robbe函数集合和使用实例




更新于 2014-06-14 23:55:57 UEANER

系统环境：

  • CentOS 6.5 x86_64
  • PHP 5.5.9
简介

Robbe 是建立在 friso 中文分词上的一个高性能 PHP 中文分词扩展。采用流行的 mmseg 算法实现， 类似于 coreseek 的 LibMMSeg 中文分词软件包。

安装 friso 分词组件
# wget https://friso.googlecode.com/files/friso-1.6.0-src-lib-dict.zip
# unzip friso-1.6.0-src-lib-dict.zip -d /usr/local/src/
# cd /usr/local/src/friso-1.6.0/src
# make && make install

Robbe 源码中的 README.txt 文件， 告诉我们：将friso里面的dict和friso.ini拷贝到一个好点的目录吧， 那我们就拷贝到好点的目录吧。

# cp /usr/local/src/friso-1.6.0/friso.ini /etc/
配置词典目录

编辑 /etc/friso.ini，friso.lex_dir 指向我们的分词目录：

friso.lex_dir = /usr/local/src/friso-1.6.0/dict/UTF-8/

注意其他用户使用 friso 时，对 /usr/local/src/friso-1.6.0/dict/ 词典目录的访问权限。

从 1.6.0 版本后添加了 GBK 编码支持，新添了 GBK 和 UTF-8 两个目录，friso.lex_dir 的目录配置为 /usr/local/src/friso-1.6.0/dict/UTF-8/ 或 /usr/local/src/friso-1.6.0/dict/GBK/，如果是 GBK friso.charset 选项设置为 1 。

1.6.0 版本之前，请设置 friso.lex_dir 目录地址为 /usr/local/src/friso-x.x.x/dict/.

首次运行：

# /usr/local/bin/friso -init /etc/friso.ini
./friso: error while loading shared libraries: libfriso.so: cannot open shared object file: No such file or directory

解决：

# cp libfriso.so /usr/lib64/

再次运行：

# /usr/local/bin/friso -init /etc/friso.ini
Initialized in 0.150000sec
+-Version: 1.6.0 (UTF-8)
+-----------------------------------------------------------+
| friso - a chinese word segmentation writen by c.          |
| bug report email - chenxin619315@gmail.com.               |
| or: visit http://code.google.com/p/friso.                 |
|     java edition for http://code.google.com/p/jcseg       |
| type 'quit' to exit the program.                          |
+-----------------------------------------------------------+
friso>> 我是中国人
分词结果:
我 是 中国人 
Done, cost < 0.000000sec
friso>> 走路去拉萨
分词结果:
走路 去 拉萨 
Done, cost < 0.000000sec
friso>> quit
Thanks for trying friso.

friso 安装并配置完毕。

安装 Robbe PHP 扩展
# wget https://robbe.googlecode.com/files/robbe-1.6.0-src-lib-dict.zip
# unzip robbe-1.6.0-src-lib-dict.zip -d /usr/local/src/
# cd /usr/local/src/robbe-1.6.0/src/
# phpize
# ./configure

到此步需要注意：无论是64位系统还是32位系统（lionsoul 注）均需编辑 Makefile 文件，分别将 robbe.lo: 和 robbe.la: 两处的 -o 参数前 添加 -lfriso，最后为 -lfriso -o。 详情请查看：http://www.oschina.net/question/853816_119031

# make && make install

配置 PHP 添加 Robbe 扩展，编辑 php.ini 添加以下内容：

extension=robbe.so
[robbe]
robbe.ini_file=/etc/friso.ini

重新加载 php-fpm，或重启 apache:

# service php-fpm reload
OR
# service httpd restart

验证 PHP 是否已加载 Robbe 扩展：

# php -m | grep robbe
robbe

或查看 phpinfo，如图：

PHP Robbe 中文分词扩展

使用

首先我们创建一个 robbe.php 测试文件，使用 robbe 的简易分词模式进行测试，内容为：

<?php
$str = 'PHP 安装 Robbe 中文分词扩展';

$participle = array();
if (defined('RB_CMODE')) { // robbe 版本 = 1.6
    $_cfg = array('mode' => RB_CMODE);
    $splitKeywords = rb_split($str, $_cfg);
    foreach($splitKeywords as $keyword) {
        $participle[] = $keyword['word'];
    }
} else if (defined('__RB_SIMPLE_MODE__')) { // robbe 版本 < 1.6
    $participle = rb_split($str, __RB_SIMPLE_MODE__);
}

var_dump($participle);

浏览器访问 http://localhost/robbe.php，输出：

array (size=5)
  0 => string 'php' (length=3)
  1 => string '安装' (length=6)
  2 => string 'robbe' (length=5)
  3 => string '中文分词' (length=12)
  4 => string '扩展' (length=6)

更多 robbe 的分词模式及使用方法请查看源码中 php 文件夹 下的文件。

从结果可以看出 friso 好像不区分大小写。（为了检索方便, friso统一将大写转换成了小写, 统一将圆角转换成了半角... lionsoul 注）

如果你使用的 sphinx/coreseek，请查看 配置官方版 Sphinx 一元分词，支持中文 或 Linux 下配置 Sphinx(coreseek) 中文分词。

Good Luck!

转载请注明出处。
本文地址：http://blog.aboutc.net/php/59/php-installation-robbe-chinese-word-extension
Starred by  16 user s
Members
Featured
Downloads
Wiki pages
Links

最新动态: robbe-1.6.0发布了

robbe开源中国git托管

一。robbe php开源高性能中文分词扩展

robbe是建立在friso中文分词上的一个高性能php中文分词扩展。了解friso

1.目前最高版本：friso 1.6.0。

2.mmseg四种过滤算法，分词准确率达到了98.41%。

3.详细功能，请访问friso官方首页：friso。

二。分词速度

测试环境：2.8GHZ/2G/Ubuntu

简单模式：3.1M/秒

复杂模式：1.4M/秒

（因为php中的大量字符串的复制，性能比friso有点下降）。

三。使用方法

Linux如何自主编译安装robbe？

Win下如何自己编译安装robbe?

robbe安装ueaner博客

1。下载：

(1).在friso下载下载最新的friso附件。

(2).在robbe下载下载最新的robbe附件。

2.安装：

(1). winNT系统： 复制friso-{version}/lib/win32/下的friso.dll和robbe-{version}/lib/win32/下的php_robbe.dll到php的ext扩展目录下。

(2). linux系统： 同上（或者自己make去安装，先安装friso，在安装robbe）。

(3). php.ini配置：

//1.加入扩展：

extension=php_robbe.dll   //win
extension=php_robbe.so    //linux

//2.加入robbe php配置：

[robbe]
;configuration file for robbe.
robbe.ini_file = friso.ini文件的绝对地址。

3。php测试：

(1).运行phpinfo.php

看到：如下的配置信息表示配置成功了：

             robbe

Robbe Support	enabled
Version	        1.1
Bug Report	chenxin619315@gmail.com
Learn More	http://code.google.com/p/robbe
C Edition	http://code.google.com/p/friso
Java Edition	http://code.google.com/p/jcseg

Directive	Local Value	Master Value
robbe.ini_file	friso.ini地址	friso.ini地址

(2).运行robbe_php下的两个php文件,你懂得。

robbe函数集合和使用实例

zhangfeng1133
关注
robbe-robot
03-16
robbe-robot
PHP中文分词扩展 SCWS
PHP学习与交流
10-10 2452
SCWS是一套基于词频词典的机械式中文分词引擎，它能将一整段的中文文本基本正确地切分成词。 词是中文的最小语素单位，但在书写时并不像英语会在词之间用空格分开， 所以如何准确并快速分词一直是中文分词的攻关难点，但是如何通过SCWS实现呢？
PHP扩展之结巴分词
zc520yzy的博客
03-18 1286
functions array jieba(string $text, int $action = 0, int $limit = 50) action 0 Extract 1 CutForSearch 2 Tag 3 TagAll 解决 Tag 对于相同 key 的问题 install git clone https://github.com/jonnywang/ph...
推荐一款PHP可用的中文分词扩展
来自一个小码农的记录
08-08 7362
本文介绍《SCWS中文分词》的安装及使用，主要用于个人记录，如有需要，请访问SCWS官方网站。 使用前准备 首先要准备Linux系统及安装编译好的php，本人使用源码编译安装的php，具体信息如下（可能有些许报错，将就着看吧） 下载安装SCWS软件 1.下载scws源码             wget http://www.xunsearch.com/scws/down/scws-...
thinkphp 3 增加分词权重搜索功能 phpanalysis插件
07-14 632
一,先在ThinkPHP\Library\Vendor\目录中安装phpanalysis插件 即WordAnalysis 目录结构如下 二,在搜索控制器中引用插件 三,搜索代码示例 下面是一个高亮函数,截取内容左右部分内容.来显示
PHP分词插件Demo
GZN的博客
07-28 699
function fc(){ $keyword = ''; require_once 'phpanalysis.class.php'; $pa=new PhpAnalysis(); $pa->SetSource("PHPAnalysis分词系统是基于字符串匹配的分词方法进行分词的，这种方法又叫做机械分词方法，它是按照一定的策略将待分析的汉字串与 一个“充分大的”机器词典
2imd-dev-portfolio
03-04
【2imd-dev-Portfolio】是Robbe Bierebeeck创建的一个Web开发作品集，主要聚焦在Webtech前端技术。这个项目包含了一系列的实验室练习，旨在展示开发者在Git、网格布局以及Flexbox等领域的技能和理解。 首先，让我们...
太阳能电池应用中纳米硅表面光学性能的优化
04-08
Cristini-Robbe、T. Xu、Y. Lambert、Y. Deblock、M. Faucher以及D. Stiévenard等多位科学家合作完成，并发表于《应用物理杂志》（Journal of Applied Physics）第115卷第13期上，具体时间为2014年，DOI编号为10....
php mmseg,PHP实现关键词全文搜索Sphinx及中文分词Coreseek的安装配置
weixin_36204045的博客
03-11 152
一、需求实现文章标题中或分类(甚至文章内容)包含搜索词的文章，按照搜索词出现的频率的权重展示。二、环境Nginx+PHP+Mysql(系统Centos7)。三、安装1.安装依赖yum -y install make gcc gcc-c++ libtool autoconf automake imake mariadb mariadb-server mariadb-devel...
使用php自动将文章标题或内容进行分词，添加和删除标签功能实例！
任聪聪的博客
09-06 2631
功能：做文章的自动分词添加标签功能 插件：PHPAnalysis分词插件 点击下载 兼容：thinkphp laravel yii 原生及常用框架 下面讲述一下开发流程： 步骤1：下载文件后将插件文件放入你的框架拓展目录或者相关的使用目录中 步骤2 :将分词类引用，同时命名，这里按你使用的框架结构来做，没有标准。 demo中的演示代码：<?php// 严格开发模式 ini_se
PHP简易中文分词
08-04
PHP简易中文分词，免组件分词 $ca = new cls_analysis(); //把一段短文本进行拆分 $str = "把一段短文本进行拆分"; $ca->SetSource( $str, 'utf-8', 'utf-8'); $ca->StartAnalysis(); $okstr = $ca->GetFinallyResult(' '); //指定分隔用的字符，默认是空格 //从一段长文本里提取出现次数最高的关键字 $str = "输入一段稍为长一点的文本"; $ca->SetSource( $str, 'utf-8', 'utf-8'); $ca->Start
iwebshop分词插件
12-29
boson,scws分词实现,使用方便,功能强大.
PHP 搜索分词
03-30
NULL 博文链接：https://justcoding.iteye.com/blog/1307647
PHP中文分词扩展(demoPHPCWS)
04-21
PHP中文分词扩展(demoPHPCWS)
探索 PHP-mmseg: 强大的中文分词库
gitblog_00038的博客
04-06 401
探索 PHP-mmseg: 强大的中文分词库 项目地址:https://gitcode.com/rainx/php-mmseg PHP-mmseg 是一个基于 PHP 的开源中文分词库，它为开发者提供了高效、准确的中文文本处理能力。本文将深入介绍该项目，解析其技术原理，探讨其应用场景，并揭示其独特之处。 项目简介 PHP-mmseg 基于 MMSEG 算法，这是一种广泛用于中文分词的经典算法，具有...
推荐开源项目：jieba-php - 强大的中文分词神器
最新发布
gitblog_00060的博客
05-14 603
推荐开源项目：jieba-php - 强大的中文分词神器 jieba-php"結巴"中文分詞：做最好的 PHP 中文分詞、中文斷詞組件。 / "Jieba" (Chinese for "to stutter") Chinese text segmentation: built to be the best PHP Chinese word segmentation module.项目地址:htt...
friso中文分词器
Belial计算机视觉&机器视觉专栏
09-13 2223
1、相关简介        friso是使用c语言开发的一个开源的中文分词器，使用流行的mmseg算法实现。完全基于模块化设计和实现，可以很方便的植入到其他程序中，例如：MySQL，PHP等。并且提供了一个php扩展：robbe。 2、功能特色 1。只支持UTF-8编码。【源码无需修改就能在各种平台下编译使用，加载完20万的词条，内存占用稳定为14M】 2。mmseg四种过滤算法，分词准确
php 分词扩展 scws
weixin_30871905的博客
12-11 96
官方：http://www.xunsearch.com/scws/index.php 以 Linux(FreeBSD) 操作系统为例 1. 取得 scws-1.2.2 的代码 wget http://www.xunsearch.com/scws/down/scws-1.2.2.tar.bz2 2. 解开压缩包 [hightman@d1 ~]$ tar xvjf ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值