在sphinx中应用复杂过滤条件

一、问题的引入

 

在sphinx应用中，需要对数据进行复杂的条件过滤，刷选出我们需要的数据。这个过程，等同于mysql查询中的where条件。

 

但sphinx本身的filter并不能支持复杂的逻辑组合运算，各个过滤条件之间只能进行AND操作，连OR操作都不支持。

 

为了解决这个问题，之前我们是在建立索引的时候，从源数据库取出数据建立索引的时候，利用mysql的sql语句，在数据导入的时候就要把逻辑摊开。

这样会带来很多问题：

1）sphinx配置文件复杂，变动不灵活，当业务发生变化的时候，需要修改后台的sphinx配置文件，重建索引；

2）没法做到业务表现和数据分离，前后台耦合严重；

3）从源db获取数据的sql语句复杂，不方便维护调整，同时增加建立索引的时间

4）sphinx的开发维护人员，必须非常清楚业务的特点才能实现，不利于各人的分工协作

5）当逻辑实在太复杂，数据导入的时候没法将逻辑摊开的时候，采用这种方式，业务就没法实现了

 

 

二、新的解决方案

新的解决方案，利用SetSelect()和SetFilter()这两个api，对sphinx的参数进行逻辑操作来实现。

下面根据例子来说明。

 

1. 准备测试环境和数据

 

创建表格和插入数据
CREATE TABLE `t_test_filter` (
  `Fcommodity_id` bigint(20) unsigned NOT NULL DEFAULT '0',
  `FUserId` int(10) unsigned NOT NULL DEFAULT '0',
  `FUserName` varchar(32) NOT NULL DEFAULT '',
  `Fshopid` bigint(20) unsigned NOT NULL DEFAULT '0',
  `Ftitle` varchar(60) NOT NULL DEFAULT '',
  `FProperty` int(10) unsigned NOT NULL DEFAULT '0',
  `FTime` int(10) unsigned NOT NULL DEFAULT '0',
  PRIMARY KEY (`Fcommodity_id`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1

 

 

创建sphinxSE的表格

CREATE TABLE `t_test_filter_sphinxSE` (
  `id` bigint(20) unsigned NOT NULL,
  `weight` int(11) DEFAULT '1',
  `query` varchar(3072) NOT NULL,
  `total_found` int(11) DEFAULT '0',
  `total_match` int(11) DEFAULT '0',
  `query_time` int(11) DEFAULT '0',
  `FUserId` int(10) unsigned DEFAULT '0',
  `Fshopid` bigint(20) unsigned NOT NULL DEFAULT '0',
  `FProperty` int(10) unsigned NOT NULL DEFAULT '0',
  `FTime` int(10) unsigned NOT NULL DEFAULT '0',
  KEY