solr安装笔记与定时器任务

一：solr启动

　　目前solr最高版本为5.5.0版本，很多solr安装都是说将server文件copy到tomcat中，但是solr版本自带有jetty的启动方式

　　首先下载solr-5.5.0版本，解压后文件目录：

　　

打开readme.txt ,发现有之下的几句话：

告诉你使用命令行启动的方式，本机为windows系统，所以打开cmd(shift+邮件--->在此处打开命令端口)，进入bin目录，输入命令solr start

这样就算是启动成功了，可以直接在浏览器中输入http://localhost:8983 查看solr管理后台

 

二：创建solr  core

 

    1.首先进入/server/solr 文件夹，创建一个文件夹，名称为你所建core的名称， 这里我的core取名为mark

    2.在mark目录下创建一个core.properties文件，里面写上:name=mark

    3.首先进入/server/solr/configsets/basic_configs,将conf目录copy到刚才的mark目录下

　 4.将managed-schema文件修改为schema.xml 文件，这是solr比较核心的文件，用来定义索引

 

先看看这个schema.xml文件

第一行： ，将这个name改为我们自己的core名称：即mark

第113行定义了id，这个可以任意修改

167行定义了唯一主键，这个主键可以是任意的类型和字段，但必须是唯一非空的，当有重复的时候，solr将会替换掉之前所创建的索引。

这里是一个默认的对文本的处理，其中配置的分词器，过滤器等。

配置上这些其实就算成功创建了一个core，可以打开后台，可以看到新添加了要给core selector.

 

 三：配置solr 数据库导入

     solr有插件可以直接从数据库中导入数据，并创建索引。主要使用solr-dataimporthandler-5.5.0.jar

　　首先在solrhome/dist 中找到 solr-dataimporthandler-5.5.0.jar，solr-dataimporthandler-extras-5.5.0.jar，solr-core-5.5.0.jar三个包，一并copy到solrhomt/server/lib中

　　在网上下载一个mysql-connector-java.jar copy到solrhomt/server/lib中

　　在我们自己的core  mark中，找到solrconfig.xml文件

　　在这个文件的根节点下添加

   

 <requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">   
          <lst name="defaults">   
               <str name="config">data-config.xml</str>   
          </lst>   
  </requestHandler>

      这是给solr服务器添加一个severlet，用来接收dataimport请求。其中配置文件data-config.xml与solrconfig.xml放在同一个目录下

　　创建一个文件data-config.xml

　　配置：

　　

<dataConfig>   
   <dataSource type="JdbcDataSource" driver="com.mysql.jdbc.Driver" url="jdbc:mysql://localhost:3306/morequ" user="root" password="root"/>

    <document>
        <entity name="mark" query="select id,value,type,datam_id,create_time  from mark where enable =0 " 
        deltaImportQuery="SELECT id,value,type,datam_id,create_time from mark where enable =0  and id='${dih.delta.id}'  " 
        deltaQuery="SELECT  id  from mark where enable =0 and create_time > '${dih.last_index_time}'" >
            <field column="id" name="id" />
            <field column="value" name="value" />
            <field column="type" name="type" />
            <field column="datam_id" name="datam_id" />
            <field column="create_time" name="create_time"/>
        </entity>
    </document>
</dataConfig>

        使用dataimport需要一个配置properties，存放一些变量，新建dataimport.properties 文件放在与data-config.xml文件同目录下

　　配置好重启solr

　　在后台，我们看到了一个新的菜单：

　　

 command可以选择是全量更新，还是增量更新。

　　

四：配置增量更新定时任务

　　当有了数据导入后，并不能实现我们想要的功能，则需要一个定时任务的东西去定时导入增量数据：

　　可以下载apache-solr-dataimportscheduler-1.0.jar 包，

　　1.将apache-solr-dataimportscheduler-1.0.jar 放在solrhome/server/solr-webapp/WEB-INF/lib里

　　注意，此包有一个问题，加载配置文件找不到

　　原因在这个文件中，

这里给他一个指定的文件路径：

   2. 放好jar包之后，需要配置配置文件

　　下载jar的时候，如果下的是with source版本，则里面自带一个dataimport.properties 配置文件，

　　注意，此时在solrhome/server/solr 中（注意，这里不是jar包的存放位置webapp），创建一个conf文件夹，将dataimport.properties放在conf中

　　

　　如果没有的这里贴出来配置文件：

　　

    #################################################  
    #                                               #  
    #       dataimport scheduler properties         #  
    #                                               #  
    #################################################  
      
    #  to sync or not to sync  
    #  1 - active; anything else - inactive  
    syncEnabled=1
      
    #  which cores to schedule  
    #  in a multi-core environment you can decide which cores you want syncronized  
    #  leave empty or comment it out if using single-core deployment  
    syncCores=mark
      
    #  solr server name or IP address  
    #  [defaults to localhost if empty]  
    server=localhost
      
    #  solr server port  
    #  [defaults to 80 if empty]  
    port=8983
      
    #  application name/context  
    #  [defaults to current ServletContextListener's context (app) name]  
    webapp=solr
      
    #  URL params [mandatory]  
    #  remainder of URL  
    #  增量更新的请求参数  
    params=/dataimport?command=delta-import&clean=false&commit=true
      
    #  schedule interval  
    #  number of minutes between two runs  
    #  [defaults to 30 if empty]  
    #  这里配置的是2min一次  
    interval=2
      
    #  重做索引的时间间隔，单位分钟，默认7200，即5天;   
    #  为空,为0,或者注释掉:表示永不重做索引  
    reBuildIndexInterval=0
      
    #  重做索引的参数  
    reBuildIndexParams=/dataimport?command=full-import&clean=true&commit=true
      
    #  重做索引时间间隔的计时开始时间，第一次真正执行的时间=reBuildIndexBeginTime+reBuildIndexInterval*60*1000；  
    #  两种格式：2012-04-11 03:10:00 或者  03:10:00，后一种会自动补全日期部分为服务启动时的日期  
    reBuildIndexBeginTime=03:10:00

     3.打开solrhome\server\solr-webapp\webapp\WEB-INF\web.xml

　　　　添加一个listener：

　　　　

   <listener>  
       <listener-class>org.apache.solr.handler.dataimport.scheduler.ApplicationListener</listener-class>  
   </listener> 

 　　4.重新启动solr，定时器任务则生效。

 

参考资料：

　　http://www.cnblogs.com/atyou/archive/2013/04/21/3033675.html