PHP-从零开始使用Solr搜索引擎服务(上)

使用搜索引擎,我们常规的数据查询会快很多,还可以对关键词进行中文分词查询,返回一些高亮,就和我们每天使用的搜索服务一样。我们这里要使用Solr来进行我们的搜索服务搭建。如果你使用php,很可能你会在网上查到Sphinx这个搜索引擎,说是对php支持的很好,不要迟疑,远离它,这个尼玛官网都没了,已经很多年没更新了,中文更是没办法支持,功能更是非常有限。Solr一直在更新版本,用的人很多,官网http://lucene.apache.org/solr/,可以了解详情。

Solr是一套java写的独立搜索引擎,当然了,如果你不会java,没有任何关系。

废话少说,我们先看怎么在服务器上安装支持中文的Solr服务(本文是基于solr最新的6.5+版本),

1:安装

首先看下服务器的java环境配置

如果低于1.8,你就要先升级服务器环境了,这个我就不描述了。

java环境配置完成之后,进入你想要安装搜索引擎的目录,直接在官网下载solr的压缩包wget https://mirrors.tuna.tsinghua.edu.cn/apache/lucene/solr/6.6.0/solr-6.6.0.tgz

(我前段时间在项目中用的时候还是6.5.1版本,现在已经6.6.0了,我这为了方便还使用6.5.1的案例描述)

下载完成之后解压目录是这样子的

打开example进入

solr-6.6.0/example/example-DIH/solr

会发现已经几个demo样子的目录

[root@10-10-87-38 solr]# ls
atom db mail solr solr.xml tika
[root@10-10-87-38 solr]#

这里需要说明一下,这个atom、db、mail等都是单独的搜索业务,大的项目里可能会拆分出像这样很多的搜索业务类型。我们复制其中的一个,如mail整个目录复制到/usr/solr-6.6.0/server/solr,

这个目录才是搜索引擎最终的查找目录,所有搜索的配置以及数据库的索引等都在这个目录下,mail 下的文件结构是这样的

[root@10-10-87-38 mail]# ls
conf core.properties data
[root@10-10-87-38 mail]#

2:启动搜索引擎

 

配置搜索,只需要关注conf就可以了,打开conf

[root@10-10-87-38 conf]# ls
admin-extra.html clustering lang mapping-FoldToASCII.txt solrconfig.xml synonyms.txt
admin-extra.menu-bottom.html currency.xml mail-data-config.xml mapping-ISOLatin1Accent.txt spellings.txt update-script.js
admin-extra.menu-top.html elevate.xml managed-schema protwords.txt stopwords.txt xslt
[root@10-10-87-38 conf]#

这时候应该就可以启动一个空的搜索服务了。

进入Solr的根目录

[root@10-10-87-38 bin]# ls
init.d install_solr_service.sh oom_solr.sh post solr solr.cmd solr.in.cmd solr.in.sh
[root@10-10-87-38 bin]# ./solr start 
WARNING: Starting Solr as the root user is a security risk and not considered best practice. Exiting.
Please consult the Reference Guide. To override this check, start with argument '-force'
[root@10-10-87-38 bin]# ./solr start -force
Waiting up to 180 seconds to see Solr running on port 8983 [|] 
Started Solr server on port 8983 (pid=9757). Happy searching!
[root@10-10-87-38 bin]#

这时候搜索引擎已经启动了,你可以在浏览器上打开一个Solr的管理界面,地址框输入

http://10.10.87.38:8983/solr/#/mail

注意左边红色框,下拉框里会显示上面你从example里复制过来的项目,红框里有一个Query,就是搜索关键词用的,你可以在这里边测试你的搜索服务是否正常,具体你可以自己点进去看一看就明白了,当然了,随便复制过来的mail肯定是不能工作的,因为这个没有连接到你自己的数据库。

3:配置Solr

重新回到/solr-6.5.1/server/solr目录下

我这复制了mail,然后改名字为crm,作为我自己的搜索模块。下面就要配置这个crm了

进入

/solr-6.5.1/server/solr/crm/conf

[root@10-10-87-38 conf]# ls
admin-extra.html clustering db-data-config.xml managed-schema protwords.txt stopwords.txt xslt
admin-extra.menu-bottom.html currency.xml elevate.xml mapping-FoldToASCII.txt solrconfig.xml synonyms.txt
admin-extra.menu-top.html dataimport.properties lang mapping-ISOLatin1Accent.txt spellings.txt update-script.js
[root@10-10-87-38 conf]#

配置db-data-config.xml

 

这个是配置数据库的,由于我这使用的mysql,然后要搜索的只有一张表,所以配置就比较简单了

你要搜索很多表的话,就配置多个entity,(我这业务上没这需求,咱们没研究这块)这个配置是让solr对数据库的字段内容建立索引并保存下来,搜索的时候不再查找数据库,直接查找索引返回结果

配置solrconfig.xml

这个是solr本身的配置,基本包含高亮显示,返回字段长短,查询超时设置等等,如果不做高级定制,这个文件基本不用动,唯一要注意的是

<requestHandler name="/dataimport" class="solr.DataImportHandler">
<lst name="defaults">
<str name="config">db-data-config.xml</str>
</lst>
</requestHandler>

配置managed-schema

这个文件很重要了,你可以在这里配置你要搜索的字段的属性,这里面你会看到很多的field节点,看一下就会知道怎么设置了。

4:配置中文搜索

默认的是不支持中文搜索的,我们还要添加中文的jar包

网上搜索一下ik-analyzer,下载ik中文分词包放在lib文件夹下

[root@10-10-87-38 solr]# cd crm/
[root@10-10-87-38 crm]# ls
conf core.properties data lib
[root@10-10-87-38 crm]# cd lib
[root@10-10-87-38 lib]# ls
IKAnalyzer.cfg.xml ext.dic ik-analyzer-solr5-5.x.jar solr-analyzer-ik-5.1.0.jar
derby-10.9.1.0.jar hsqldb-1.8.0.10.jar mysql-connector-java-5.1.42.jar stopword.dic
[root@10-10-87-38 lib]# pwd
/solr-6.5.1/server/solr/crm/lib
[root@10-10-87-38 lib]#

分词包装好后要返回到managed-schema配置中文分词的支持

在文件末尾添加节点

然后在你想要搜索中文的字段里添加ik分词

5:完成Solr

保存所有修改过的配置,然后重启Solr服务。再从浏览器进入Solr管理界面。

首先我们要验证一下中文分词是否配置成功了(中文没配置成功,我们的搜索就没有意义)

像这样子的,你的中文分词就配置成功了。

下面就可以测试你的搜索了

看到这样的界面就说明Solr的搜索引擎服务配置完全成功了!

现在可以庆祝第一阶段的胜利了。

接下来我们就要使用PHP来访问搜索结果,封装接口提供给前端调用。^_^

posted @ 2018-05-09 09:19  Microtiger  阅读(275)  评论(0编辑  收藏  举报