php全文索引算法,PHP+MYSQL简单实现中文分词全文索引,dedecms范例

废话不多说了,首先去DEDE下载分词算法函数和词库;下载地址:http://www.dedecms.com/html/chanpinxiazai/20061229/3.html

里面有详细的使用说明,我在这里举一个使用的例子;

MYSQL表名:music

字段:title,tag

require("lib_splitword_full.php");

$str = "这里是你要分词的内容,一般不要超过1024KB会好一点,否则会很慢!";

$sp = new SplitWord();//实例化

$dd = explode(" ",$sp->SplitRMM($str));

$i=0;

foreach ($dd as $key=>$var) {

if (strlen($var)>2)//UTF8编码的请设置为3,因为UTF8编码的中文一般为3个字节以上,过滤单个字不保存!

{

$str.=base64_encode($var)." ";//由于MYSQL不支持中文全文索引,所以在分词中我们必须把词转换成字母或者数字,这里我选择了base64编码

//当然大家还可以把中文转成区码,但我测试过区码的方法,感觉很一般,所以在这样我推荐大家使用base64

$i++;

}

if ($i>=50) break;//这里是设置你要存储多少个词组,如果是文章可能会有N多词组,你可以设置大一点,但如果你对标题分词的话,50个已经足够了!

//这样运行未编码得出来的结果:这里 分词 内容 一般 不要 超过 1024KB 一点 否则

//base64编码后的结果:1eLA7w== t9a0yg== xNrI3Q== 0ruw4w== srvSqg== s6y5/Q== MTAyNEtC 0ru14w== t/HU8g==

}

?>

这样我们就可以把分好词而且转换成编码的分词存进 tag 字段了,当然tag字段必须设置成全文索引 full text 而且数据表类型必须为MyISAM。

tag字段数据类型为CHAR和VARCHAR、text,有关如何创建MYSQL全文索引,大家可以搜索一下《mysql创建索引》遍地开花,到处都是!

下面的例子是根据TAG字段的内容进行全文索引查询:

include("Mysql.class.php");

$rs = $DB->get_one("select title,tag from music where id=$id");//根据ID读取title和tag字段内容

$title = $rs['title'];

$sql = $DB->query("select title,MATCH(tag) AGAINST('".trim($rs['tag'])."' IN BOOLEAN MODE) AS score from music where MATCH(tag) AGAINST('".trim($rs['tag'])."' IN BOOLEAN MODE) ORDER BY score DESC limit 21");//这里是查询20条相似的内容,而且按相似的排序,21是因为同一条记录都会匹配出来!

while ($rs = $DB->fetch_array($sql))

{

if ($rs['title']!=$title)

{

echo $rs['title']."
";

}

}

$DB->close();

?>

DedeCMS问题解决

请点击在线联系我们【点击咨询解决问题】   如果您有任何织梦问题,我们将免费为您写解决教程!

用心认真写教程不易,请小打赏我们一下,多少是心意,解决问题是重点

【打赏说明】 如果您认为在本站中看的内容质量不错、或阅读后有所收获、或解决您遇到的实际问题,那不妨小金额的赞助一下尚禹科技,让尚禹科技有动力继续写出更多高质量的教程和心得。以帮助更多的人。[查看打赏记录]

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值