coreseek+php之sphinx扩展安装+php调用示例

[参考资料](https://blog.csdn.net/moqiang02/article/details/42027243)

[关于排序和分而已,及sphinxapi.php的调用](https://blog.csdn.net/joyatonce/article/details/52059564)

首先了解sphinx是什么?

他是一个服务,用于搜索的服务,也可以说是一个搜索引擎,

如果使用搜索引擎,必须开启他的服务,

其次在api根据端口号启用服务,并传入关键字

注意在thinkphp中在new对象的时候要加\,

如下:

public function test()

{

$cl=new \SphinxClient();

$cl->SetServer('127.0.0.1',9312);

$cl->SetArrayResult(true);

$cl->SetMatchMode(SPH_MATCH_ANY);

$cl->SetLimits(0,12);

$index_name="dizhi";

$key="经营部";

$this->s_keywords=$key;

$this->s_index=$index_name;

$this->h_cl=$cl;

$this->h_opts= array(

"before_match" => "",

"after_match" => "",

"chunk_separator" => "
",

//            "limit" => 6,

//            "around" =>3

        );

$res=$cl->Query($key,$index_name);

$ids=array_column($res['matches'],"id");

//        var_dump($ids);

        $m=M();

$where['id']=array("in",$ids);

$res=$m->table("address")->where($where)->select();

//BuildExcerpts ( $docs, $this->s_index, $this->s_keywords, $this->h_opts);

        foreach ($resas $k=>$v){

$res[$k]=$cl->BuildExcerpts ( $v, $this->s_index, $this->s_keywords, $this->h_opts);

}

//        var_dump($res);

        $this->assign("res",$res);

$this->display("");

}

-------------------------------------方法结束

第二点要注意的是,在search.exe中是不能搜索中文的,但是可以用英文和数字测试是否可用,

返回的weight和size,就有ip,根据ip去验证;

下面附上常用命令

indexer.exe -c D:\project\coreseek\sphinx.conf zhilian //生成索引文件

search.exe -c D:\mysoftware\coreseek-3.2.14-win32\sphinx.conf redis    //查询redis的数目

D:\mysoftware\coreseek-3.2.14-win32\bin>indexer.exe -c D:\mysoftware\coreseek-3.

2.14-win32\sphinx.conf --merge zhilian  add_zhilian  --rotate //合并索引

-c 执行  配置目录  索引文件名称

D:\project\coreseek\bin>searchd.exe  --install  -c  D:\mysoftware\coreseek-3.2.14-win32\sphinx.conf        //安装服务器

sc delete searchd//删除服务

replace into a select 1,max(id) from zhilian;//记录生成的最大id数

D:\mysoftware\coreseek-3.2.14-win32\bin>indexer.exe -c D:\mysoftware\coreseek-3.

2.14-win32\sphinx.conf --merge zhilian  add_zhilian  --rotate//合并索引

D:\mysoftware\coreseek-3.2.14-win32\bin>indexer.exe -c D:\mysoftware\coreseek-3.

2.14-win32\sphinx.conf add_zhilian  //生成新增数据的索引

///////一定要注意  searchd是否启动服务


sphinx与mysql的配置

创建sphinx统计表,在coreseek_test库中执行。

CREATETABLEsph_counter

counter_idINTEGERPRIMARYKEYNOTNULL,

max_doc_idINTEGERNOTNULL

); 

创建配置sphinx与mysql的配置文件

# vi /usr/local/coreseek/etc/csft_mysql.conf 

#MySQL数据源配置,详情请查看:http://www.coreseek.cn/docs/coreseek_4.1-sphinx_2.0.1-beta.html#conf-reference 


#源定义 

source main 

    type                    = mysql 


    sql_host                = localhost 

    sql_user                = root 

    sql_pass                = 123456 

    sql_db                  = coreseek_test 

    sql_port                = 3306 

    sql_query_pre          = SET NAMES utf8 

    sql_query_pre          = REPLACE INTO sph_counter SELECT 1,MAX(id) FROM hr_spider_company; 

    sql_query              = SELECT * FROM hr_spider_company WHERE id<=( SELECT max_doc_id FROM sph_counter WHERE counter_id=1 ) #sql_query第一列id需为整数 

    #title、content作为字符串/文本字段,被全文索引 (注:执行报错的话把下面的几行注释掉)

    sql_attr_uint            = id                        #从SQL读取到的值必须为整数 

    sql_attr_uint            = from_id                #从SQL读取到的值必须为整数,不支持全文检索 

    sql_attr_uint            = link_id                #从SQL读取到的值必须为整数,不支持全文检索 

    sql_attr_uint            = add_time                #从SQL读取到的值必须为整数,不支持全文检索 

    sql_field_string        = link_url                #字符串字段(可全文搜索,可返回原始文本信息) 

    sql_field_string        = company_name          #字符串字段(可全文搜索,可返回原始文本信息) 

    sql_field_string        = type_name            #字符串字段(可全文搜索,可返回原始文本信息) 

    sql_field_string        = trade_name            #字符串字段(可全文搜索,可返回原始文本信息) 

    sql_field_string        = email                #字符串字段(可全文搜索,可返回原始文本信息) 

    sql_field_string        = description            #字符串字段(可全文搜索,可返回原始文本信息) 


    sql_query_info_pre      = SET NAMES utf8        #命令行查询时,设置正确的字符集 

    sql_query_info          = SELECT id,from_id,link_id,company_name,type_name,trade_name,address,description, FROM_UNIXTIME(add_time) AS add_time  FROM hr_spider_company  WHERE id=$id                    #命令行查询时,从数据库读取原始数据信息 


source delta : main   

{   

    sql_query_pre          = SET NAMES utf8   

    sql_query              = SELECT * FROM hr_spider_company WHERE id>( SELECT max_doc_id FROM sph_counter WHERE counter_id=1 ) 

    sql_query_post_index    = REPLACE INTO sph_counter SELECT 1,MAX(id) FROM hr_spider_company 

}   




#index定义 

index main 

    source                = main  #对应的source名称 

    path                  = /usr/local/coreseek/var/data/mysql  #请修改为实际使用的绝对路径,例如:/usr/local/coreseek/var/... 

    docinfo              = extern 

    mlock                = 0 

    morphology            = none 

    min_word_len          = 1 

    html_strip            = 0 


    #中文分词配置,详情请查看:http://www.coreseek.cn/products-install/coreseek_mmseg/ 

    charset_dictpath    = /usr/local/mmseg3/etc/          #BSD、Linux环境下设置,/符号结尾 

    charset_type        = zh_cn.utf-8 


index delta : main   

{   

    source          = delta   

    path            = /usr/local/coreseek/var/data/delta 



#全局index定义 

indexer 

    mem_limit            = 128M 


#searchd服务定义 

searchd 

    listen              = 9312 

    read_timeout        = 5 

    max_children        = 30 

    max_matches        = 1000 

    seamless_rotate    = 0 

    preopen_indexes    = 0 

    unlink_old          = 1 

    pid_file    = /usr/local/coreseek/var/log/searchd_mysql.pid  #请修改为实际使用的绝对路径,例如:/usr/local/coreseek/var/... 

    log          = /usr/local/coreseek/var/log/searchd_mysql.log  #请修改为实际使用的绝对路径,例如:/usr/local/coreseek/var/... 

    query_log    = /usr/local/coreseek/var/log/query_mysql.log    #请修改为实际使用的绝对路径,例如:/usr/local/coreseek/var/... 

    binlog_path  =                                                #关闭binlog日志 

}

我的测试表名为hr_spider_company,你只需要根据实际需求更改为自己的表名即可。

调用命令列表:

启动后台服务(必须开启)

# /usr/local/coreseek/bin/searchd -c /usr/local/coreseek/etc/csft_mysql.conf

执行索引(查询、测试前必须执行一次)

/usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf --all --rotate

执行增量索引

/usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf delta --rotate

合并索引

/usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf --merge main delta --rotate --merge-dst-range deleted 0 0

(为了防止多个关键字指向同一个文档加上--merge-dst-range deleted 0 0)

后台服务测试

# /usr/local/coreseek/bin/search -c /usr/local/coreseek/etc/csft_mysql.conf  aaa

关闭后台服务

# /usr/local/coreseek/bin/searchd -c /usr/local/coreseek/etc/csft_mysql.conf --stop

自动化命令:

crontab -e

*/1 * * * * /bin/sh /usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf delta --rotate 

*/5 * * * * /bin/sh /usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf --merge main delta --rotate --merge-dst-range deleted 0 0 

30 1 * * *  /bin/sh /usr/local/coreseek/bin/indexer -c /usr/local/coreseek/etc/csft_mysql.conf --all --rotate

以下任务计划的意思是:每隔一分钟执行一遍增量索引,每五分钟执行一遍合并索引,每天1:30执行整体索引。

Sphinx扩展安装安装

Coreseek官方教程中建议php使用直接include一个php文件进行操作,事实上php有独立的sphinx模块可以直接操作coreseek(coreseek就是sphinx!)已经进入了php的官方函数库,而且效率的提升不是一点点!但php模块依赖于libsphinxclient包。

[第一步] 安装依赖libsphinxclient

# cd /var/install/coreseek-4.1-beta/csft-4.1/api/libsphinxclient/ 

# ./configure  --prefix=/usr/local/sphinxclient 


configure: creating ./config.status 

config.status: creating Makefile 

config.status: error: cannot find input file: Makefile.in  #报错configure失败     


//处理configure报错 

编译过程中报了一个config.status: error: cannot find input file: src/Makefile.in这个的错误,然后运行下列指令再次编译就能通过了: 

# aclocal 

# libtoolize --force 

# automake --add-missing 

# autoconf 

# autoheader 

# make clean 


//从新configure编译 

# ./configure 


# make && make install 

[第二步] 安装sphinx的PHP扩展

http://pecl.php.net/package/sphinx 

# wget http://pecl.php.net/get/sphinx-1.3.0.tgz 

# tar zxvf sphinx-1.3.0.tgz 

# cd sphinx-1.3.0 

# phpize 

# ./configure --with-php-config=/usr/bin/php-config --with-sphinx=/usr/local/sphinxclient 

# make && make install 

# cd /etc/php.d/ 

# cp gd.ini  sphinx.ini 

# vi sphinx.ini 


extension=sphinx.so 


# service php-fpm restart 

打开phpinfo看一下是否已经支持了sphinx模块。

php调用sphinx示例:


$s =newSphinxClient;

$s->setServer("127.0.0.1",9312);


$s->setMatchMode(SPH_MATCH_PHRASE); 

$s->setMaxQueryTime(30);

$res = $s->query("宝马",'main');#[宝马]关键字,[main]数据源source 

$err = $s->GetLastError(); 

var_dump(array_keys($res['matches']));

echo"
"."通过获取的ID来读取数据库中的值即可。"."
";


echo'

';

var_dump($res); 

var_dump($err); 

echo'';

调用示例二:支持分页


header("Content-type: text/html; charset=utf-8");

require("./sphinxapi.php");

$s =newSphinxClient;

$s->setServer("192.168.252.132",9312);


//SPH_MATCH_ALL, 匹配所有查询词(默认模式); SPH_MATCH_ANY, 匹配查询词中的任意一个; SPH_MATCH_EXTENDED2, 支持特殊运算符查询 

$s->setMatchMode(SPH_MATCH_ALL); 

$s->setMaxQueryTime(30);//设置最大搜索时间 

$s->SetArrayResult(false);//是否将Matches的key用ID代替 

$s->SetSelect ("*");//设置返回信息的内容,等同于SQL 

$s->SetRankingMode(SPH_RANK_BM25);//设置评分模式,SPH_RANK_BM25可能使包含多个词的查询的结果质量下降。 

//$s->SetSortMode(SPH_SORT_EXTENDED);                //发现增加此参数会使结果不准确 

//$s->SetSortMode(SPH_SORT_EXTENDED,"from_id asc,id desc");  //设置匹配项的排序模式, SPH_SORT_EXTENDED按一种类似SQL的方式将列组合起来,升序或降序排列。 

$weights =array('company_name'=>20);

$s->SetFieldWeights($weights);//设置字段权重 

$s->SetLimits (0,30,1000,0);//设置结果集偏移量  SetLimits (便宜量,匹配项数目,查询的结果集数默认1000,阀值达到后停止) 

//$s->SetFilter ( $attribute, $values, $exclude=false );    //设置属性过滤 

//$s->SetGroupBy ( $attribute, $func, $groupsort="@group desc" );    //设置分组的属性 

$res = $s->query('@* "汽车"','main','--single-0-query--');#[宝马]关键字,[news]数据源source 



//代码高亮 

$tags =array();

$tags_name =array();

foreach($res['matches']as$key=>$value){

$tags[] = $value['attrs'];

$company_name[] = $value['attrs']['company_name'];

$description[] = $value['attrs']['description'];

$company_name = $s->BuildExcerpts ($company_name,'main','汽车', $opts=array() );//执行高亮,这里索引名字千万不能用* 

$description = $s->BuildExcerpts ($description,'main','汽车', $opts=array() );//执行高亮,这里索引名字千万不能用* 

foreach($tagsas$k=>$v)

$tags[$k]['company_name'] = $company_name[$k];//高亮后覆盖 

$tags[$k]['description'] = $description[$k];//高亮后覆盖 


// 高亮后覆盖 

$i =0;

foreach($res['matches']as$key=>$value){

$res['matches'][$key] = $tags[$i];

$i++; 


$err = $s->GetLastError(); 


echo'

';

var_export($res); 

var_export($err); 

echo'';

******************************************************************************************************************

错误:FATAL: failedto lock pid file '/home/zhangjie_z.pt/local/sphinx/var/log/searchd.pid':Resource temporarily unavailable (searchd alrecoreseek+php之sphinx扩展安装+php调用示例 - CSDN博客ady running?)

意思就是你已经打开了一个search进程,你需要找到相关进程号ps -e|grep searchd,然后kill PID杀死之前的进程,再启动新进程)

启动 searchd 服务时提示如下错误:

index 'test1': search error: failed to open /var/lib/sphinx/test1.sph: sphinx 错误解决 index 'test1': search error: failed to open /var/lib/sphinx/test.sph:No such file or directory; NOT SERVING

这个错误可能是没有建立好索引导致的,所以 indexer --all 很重要

CentOS6.x安装Coreseek和Sphinx扩展for PHP - 简书


安装coreseek与sphinx遇见的问题 - sphinx- - ITkeyowrd



搭建coreseek(sphinx+mmseg3)详细安装配置+php之sphinx扩展安装+php调用示例 - CSDN博客


关于coressek的相关笔记整理如下:

sphinx安装常见错误_mogfee_新浪博客


Linux下Coreseek的安装配置 - 为程序员服务


讯搜可以替代coreseek

迅搜(xunsearch) - 开源免费中文全文搜索引擎|PHP全文检索|mysql全文检索|站内搜索

概述 - 权威指南 - 迅搜(xunsearch) - 开源免费中文全文搜索引擎

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,911评论 5 460
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 82,014评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 142,129评论 0 320
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,283评论 1 264
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,159评论 4 357
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,161评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,565评论 3 382
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,251评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,531评论 1 292
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,619评论 2 310
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,383评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,255评论 3 313
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,624评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,916评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,199评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,553评论 2 342
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,756评论 2 335

推荐阅读更多精彩内容