solr配置dataimport步骤增量全量同步配置

不念不忘少年蓝@ 2022-06-12 15:11 410阅读 0赞

按照昨天的步骤，可以看到一个无内容的solr管理界面，其中，collection1中没有任何数据内容，这次就详细说明一下如果配置solr中的相关文件进行直接的[数据库][Link 1]导入操作。

#### 配置步骤 ####

1、所需jar包： 可在solr-4.7.0\\dist目录下copy   
1） solr-dataimporthandler-extras-4.7.0.jar；   
2） solr-dataimporthandler-4.7.0.jar；   
3） ojdbc-6.jar；自己下载   
将jar包放在tomcat下的\\webapps\\solr\\WEB-INF\\lib中   
![这里写图片描述][SouthEast]

2、修改solr的核心配置 ：   
F:\\cjj\\solr\\solr-4.7.0\\solrhome\\collection1\\conf   
之前创建的solrhome下的配置文件中：需要更改3个地方：   
![这里写图片描述][SouthEast 1]   
2.1）首先是solrconfig.xml文件,添加如下这段配置：

<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">  
          <lst name="defaults"> 
                 <str name="config">data-config.xml</str>   
           </lst>   
        </requestHandler>  
    
     
      
       1
       2
       3
       4
       5
       6
      
     
      
       1
       2
       3
       4
       5
       6

指向一个自定义文件：data-config.xml，顾名思义，是配置相关数据源的。

2.2）然后是新建data-config.xml文件,添加如下这段配置：

<?xml version="1.0" encoding="UTF-8" ?>  
    
    <dataConfig>
        <dataSource driver="oracle.jdbc.driver.OracleDriver" url="jdbc:oracle:thin:@192.168.17.184:1521:gisdev" user="gisdev" password="gisdev"/>       <document name="salesDoc">
          <entity name="t_map_point" query="select * from t_map_point where type ='SALES_DEPT' and isvalid ='1' " >
           <field name="id" column="id" />
           <field name="name" column="name" />
           <field name="address" column="address" />
           <field name="lng_baidu" column="lng_baidu" />
           <field name="lat_baidu" column="lat_baidu" />
         </entity>
       </document>
    </dataConfig>
    
     
      
       1
       2
       3
       4
       5
       6
       7
       8
       9
       10
       11
       12
       13
       14
      
     
      
       1
       2
       3
       4
       5
       6
       7
       8
       9
       10
       11
       12
       13
       14

![这里写图片描述][SouthEast 2]

2.3）最后的一个文件配置是修改schema.xml文件,添加在data-config中定义的字段，如果已经存在如id,name，则可不用重新添加。   
![这里写图片描述][SouthEast 3]

3、最后一步,全量或者增量导入数据：   
启动tomcat,选择collection1，选择dataimport命令界面：   
我们可以选择是全量导入还是增量导入，并且选择配置好的实体。   
![这里写图片描述][SouthEast 4]   
实体是我们在data-config.xml中配置的实体，已根据SQL过滤。   
![这里写图片描述][SouthEast 5]   
点击execute后   
![这里写图片描述][SouthEast 6]   
等待一会，刷新一下，可以看到已经执行完毕了。   
![这里写图片描述][SouthEast 7]   
这个时候，再返回去看collection1中有什么变化：   
![这里写图片描述][SouthEast 8]   
可以看到总数有9068条数据组合成的docs，对应数据库中过滤出的9068的总数，每个实体也按照我们定义好的字段显示出来，是放在docs的索引节点存在的。   
![这里写图片描述][SouthEast 9]

至此，我们就完成了数据库导入至solr的全部配置和步骤了，下节就分享一下如何通过[Java][]连接solr进行数据操作了。   
学无止境~   
希望看到此篇博客的网友们都有好心情~

[Link 1]: http://lib.csdn.net/base/mysql
[SouthEast]: /images/20220612/156d2b0bd2bb4e54a8598d69994ca638.png
[SouthEast 1]: /images/20220612/9e0a726d428644eabb0f6a99e7b67374.png
[SouthEast 2]: /images/20220612/ceac31ec7c9f4d92b8ed8f2d21aaed2e.png
[SouthEast 3]: /images/20220612/9ec5fb3a229f4e289f19333d9fbde2a8.png
[SouthEast 4]: /images/20220612/17c727f44b214f30949744f4e5ca5f75.png
[SouthEast 5]: /images/20220612/aecbd6e891f643d1aadf7e230c05dd9b.png
[SouthEast 6]: /images/20220612/2c70506f805e4d0e80bb9527751c1ac3.png
[SouthEast 7]: /images/20220612/656a70ff4e5c4018853a11fbf2a95212.png
[SouthEast 8]: /images/20220612/77f1e87b3fd54bf5a0ed40b858b14c34.png
[SouthEast 9]: /images/20220612/ae6310f19a1d47e5a68e698c8e0e2e11.png
[Java]: http://lib.csdn.net/base/java