EmbeddedSolrServer的使用与solor6.3.0的使用

1.    到solr官网下载对应版本的solr:

    https://lucene.apache.org/solr/

  我下载的是:6.3.0版本(需要JDK8),solr默认集成了jetty容器,而且在索引使用方面集成了zookeeper。解压后如下:

2.  启动solr--到bin目录下启动即可

PS G:\solr\solr-6.3.0\bin> .\solr.cmd start
Waiting up to 30 to see Solr running on port 8983
Started Solr server on port 8983. Happy searching!

停止服务的方法:

PS G:\solr\solr-6.3.0\bin> .\solr.cmd stop -p 8983
Stopping Solr process 21260 running on port 8983

 

可以通过web界面查看系统的一些属性。(当然也可以添加core的field与查看field)

访问     http://localhost:8983/

solrt自带的配置文件的位置:

 

3.创建一个core

 0.在solr-6.3.0\server\solr下面创建一个collection1目录

 1.将solr-6.3.0\server\solr\configsets\sample_techproducts_configs目录下的conf复制到上面新建的目录

2.   添加core

 解释:

  collection1:叫做一个Solr运行实例SolrCore,SolrCore名称不固定,一个solr运行实例对外单独提供索引和搜索接口。

  solrHome中可以创建多个solr运行实例SolrCore。

  一个solr的运行实例对应一个索引目录。

  conf是SolrCore的配置文件目录 。

  data目录存放索引文件需要创建

 

添加方法如下:

 

 

 然后在进入到\collection1目录,此时会发现多了一个data文件夹和一个properties文件,如图

 

 

   data目录,用于存储索引文件,core.properties文件用于存放core的配置信息

注意:在Solr5以后,schema.xml文件已经不是默认生成好的了,它被取了一个名字managed-schema,并且没有后缀。

  solr使用schema.xml还是managed-schema?

solr6使用<schemaFactory/>来控制使用schema的方式,默认使用的是ManagedIndexSchemaFactory,但是在solrconfig.xml文件中,这个配置没有显示的指定出来,其实它相当于

<schemaFactory class="ManagedIndexSchemaFactory">
<bool name="mutable">true</bool>
<str name="managedSchemaResourceName">managed-schema</str>
</schemaFactory>

  mutable 是否改变Schema数据,设置为false可以防止他人更改Schema
  managedSchemaResourceName 可以指定Schema的名字,当然值不能是schema.xml
  如果你已经熟悉了之前的配置方式,可以使用ClassicIndexSchemaFactory,只需要在solrconfig.xml文件中添加这样的配置

  <schemaFactory class="ClassicIndexSchemaFactory"/>

  即可,当然这就需要你必须配置一个schema.xml文件。否则会初始化core失败错误。

4.    代码中使用EmbeddedSolrServer   (内嵌)   来使用solr索引--一般采用这种方式,只需要solr目录就可以在java中操作

pom.xml

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <groupId>cn.qlq</groupId>
    <artifactId>solr</artifactId>
    <version>0.0.1-SNAPSHOT</version>

    <dependencies>
        <dependency>
            <groupId>org.apache.solr</groupId>
            <artifactId>solr-core</artifactId>
            <version>6.3.0</version>
        </dependency>

    </dependencies>
    <build>
        <!-- 配置了很多插件 -->
        <plugins>
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-compiler-plugin</artifactId>
                <version>3.5.1</version>
                <configuration>
                    <source>1.8</source>
                    <target>1.8</target>
                    <encoding>UTF-8</encoding>
                </configuration>
            </plugin>
            <plugin>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-maven-plugin</artifactId>
            </plugin>
        </plugins>
    </build>
</project>

 

0.EmbeddedSolrServer的创建方式

        System.setProperty("solr.solr.home", "G:\\solr\\solr-6.3.0\\server\\solr"); // 这是slorhome目录,下面初始化CoreContainer默认读取这个环境变量
        CoreContainer coreContainer = new CoreContainer();
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");

或者

        CoreContainer coreContainer = new CoreContainer("G:\\solr\\solr-6.3.0\\server\\solr");
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");

1.添加索引

package solr;

import java.io.IOException;

import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.embedded.EmbeddedSolrServer;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.core.CoreContainer;

public class SolrIndexManager {

    public static void main(String[] args) throws SolrServerException, IOException {
        // CoreContainer coreContainer = new
        // CoreContainer("G:\\solr\\solr-6.3.0\\server\\solr\\collection1");

        System.setProperty("solr.solr.home", "G:\\solr\\solr-6.3.0\\server\\solr"); // 这是slorhome目录
        CoreContainer coreContainer = new CoreContainer();
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");

        try {
            // 构造一篇文档
            SolrInputDocument document = new SolrInputDocument();
            // 往doc中添加字段,在客户端这边添加的字段必须在服务端中有过定义
            document.addField("id", "4");
            document.addField("name", "你好");
            document.addField("description", "前进的中国你好");
            solrServer.add(document);

            solrServer.commit();
        } finally {
            solrServer.close();
        }
    }

}

  需要注意:addField的时候field必须在上面的managed-schema或者schema.xml进行配置。也就是字段必须存在。而且ID字段必须存在。

 

添加之后会在data生成索引文件:

2.查询索引

package solr;

import java.io.IOException;

import org.apache.solr.client.solrj.SolrQuery;
import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.embedded.EmbeddedSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.core.CoreContainer;

public class SolrIndexManager {

    public static void main(String[] args) throws SolrServerException, IOException {
        CoreContainer coreContainer = new CoreContainer("G:\\solr\\solr-6.3.0\\server\\solr");
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");// queryIndex(solrServer);

    }

    /**
     * 查询索引
     * 
     * @param solrServer
     * @throws SolrServerException
     * @throws IOException
     */
    private static void queryIndex(EmbeddedSolrServer solrServer) throws SolrServerException, IOException {
        // 创建一个query对象
        SolrQuery query = new SolrQuery();
        // 设置查询条件
        query.setQuery("*:*");
        // 执行查询
        QueryResponse queryResponse = solrServer.query(query);
        // 取查询结果
        SolrDocumentList solrDocumentList = queryResponse.getResults();
        // 共查询到商品数量
        System.out.println("共查询数量:" + solrDocumentList.getNumFound());
        // 遍历查询的结果
        for (SolrDocument solrDocument : solrDocumentList) {
            System.out.println(solrDocument.get("id"));
            System.out.println(solrDocument.get("name"));
            System.out.println(solrDocument.get("description"));
        }

        // 必须关闭,否则线程不会停止
        solrServer.close();
    }

}

结果:

共查询数量:2
1
你好
前进的中国你好
2
你好
前进的中国你好

3.根据ID删除索引

        CoreContainer coreContainer = new CoreContainer("G:\\solr\\solr-6.3.0\\server\\solr");
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");

        // 根据id删除文档
        solrServer.deleteById("1");
        // 提交修改
        solrServer.commit();

 

5.solr以目录的形式进行迁移

将 solr-6.3.0\server\solr 目录复制到F盘下,如下:

 

 代码测试:

package solr;

import java.io.IOException;

import org.apache.solr.client.solrj.SolrQuery;
import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.embedded.EmbeddedSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.core.CoreContainer;

public class SolrIndexManager {

    public static void main(String[] args) throws SolrServerException, IOException {
        CoreContainer coreContainer = new CoreContainer("F:\\solr");
        coreContainer.load();
        EmbeddedSolrServer solrServer = new EmbeddedSolrServer(coreContainer, "collection1");

         queryIndex(solrServer);

    }

    /**
     * 查询索引
     * 
     * @param solrServer
     * @throws SolrServerException
     * @throws IOException
     */
    private static void queryIndex(EmbeddedSolrServer solrServer) throws SolrServerException, IOException {
        // 创建一个query对象
        SolrQuery query = new SolrQuery();
        // 设置查询条件
        query.setQuery("*:*");
        // 执行查询
        QueryResponse queryResponse = solrServer.query(query);
        // 取查询结果
        SolrDocumentList solrDocumentList = queryResponse.getResults();
        // 共查询到商品数量
        System.out.println("共查询数量:" + solrDocumentList.getNumFound());
        // 遍历查询的结果
        for (SolrDocument solrDocument : solrDocumentList) {
            System.out.println(solrDocument.get("id"));
            System.out.println(solrDocument.get("name"));
            System.out.println(solrDocument.get("description"));
        }

        // 必须关闭,否则线程不会停止
        solrServer.close();
    }
}

结果:

F:\solr
共查询数量:1
2
你好
前进的中国你好

 

补充:以目录的形式创建多个core:

(1)复制collection1.且命名为collection2

(2)并且修改collection2文件夹中配置文件core.properties中的名字为collection2即可

 

6.  关于 solrconfig.xml中的solr.lock.type类型的配置--默认不能多个服务同时使用,如果在jetty中访问则程序不能操作

    <!-- LockFactory 

         This option specifies which Lucene LockFactory implementation
         to use.
      
         single = SingleInstanceLockFactory - suggested for a
                  read-only index or when there is no possibility of
                  another process trying to modify the index.
         native = NativeFSLockFactory - uses OS native file locking.
                  Do not use when multiple solr webapps in the same
                  JVM are attempting to share a single index.
         simple = SimpleFSLockFactory  - uses a plain file for locking

         Defaults: 'native' is default for Solr3.6 and later, otherwise
                   'simple' is the default

         More details on the nuances of each LockFactory...
         http://wiki.apache.org/lucene-java/AvailableLockFactories
    -->
    <lockType>${solr.lock.type:native}</lockType>

设置索引库的锁方式,主要有三种:

  1.single:适用于只读的索引库,即索引库是定死的,不会再更改

  2.native:使用本地操作系统的文件锁方式,不能用于多个solr服务共用同一个索引库。Solr3.6 及后期版本使用的默认锁机制。

  3.simple:使用简单的文件锁机制

  当一个solrserver访问某个core的时候在data\index目录下会生成一个锁文件:

 

 

 总结:

  如果需要对文档或者数据库的内容进行增加索引操作,一种办法是使用dataimport插件进行批量导入索引。

  另一种则是手动操作(实际也是用的这种),如果对数据库数据进行索引,采用select *   查出来之后使用solr创建document(在solr称为document,在DB中称为行)并加到索引中,这个需要提前设计好需要索引的字段。(这种情况可能不实时,可以用定时任务去进行solr索引的维护操作)。    如果是对文档添加索引,可以用apache的io包读取文档内容添加索引,对文件名称等信息进行添加索引,也可以用定时任务维护solr索引。

 

  

posted @ 2019-03-28 12:04  QiaoZhi  阅读(1032)  评论(0编辑  收藏  举报