Solr通过配DIH对数据库数据做索引

1 加入相关jar包

将2个相关jar包复制到/opt/solr-7.7.1/server/solr-webapp/webapp/WEB-INF/lib文件夹下

jar包名称
solr-dataimporthandler-extras-7.7.1.jar
solr-dataimporthandler-7.7.1.jar

jar包所在位置/opt/solr-7.7.1/dist

并将连接oracle的jar包也复制到该目录下

2 配置Core下的solrconfig.xml文件

/opt/solr-7.7.1/server/solr/article_core/conf/solrconfig.xml

加入到<config></config>标签内

<!-- import date-->

<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">

　　<lst name="defaults">

　　　　<str name="config">data-config.xml</str>

　　</lst>

</requestHandler>

3 在conf中创建data-config.xml

/opt/solr-7.7.1/server/solr/article_core/conf中

<?xml version="1.0" encoding="UTF-8" ?>

<dataConfig>

    <dataSource type="JdbcDataSource"

        driver="oracle.jdbc.driver.OracleDriver"

        url="jdbc:oracle:thin:@ip地址:1521:ORCL"

        user="连接数据库用户名"

        password="连接数据库密码"/>

    <document>

        <entity name="bookInfo" query="SELECT

            BOOK_ID,

            TITLE_CN,

            TITLE_EN,

            KEYWORDS_CN,

            KEYWORDS_EN

            from

            EL.T_BOOK_INFO">

            <field column="BOOK_ID" name="id"/>

            <field column="TITLE_CN" name="titleCn"/>

            <field column="TITLE_EN" name="titleEN"/>

            <field column="KEYWORDS_CN" name="keywordsCn"/>

            <field column="KEYWORDS_EN" name="keywordsEn"/>

        </entity>

    </document>

</dataConfig>

4在schema.xml中添加域

<field name="id" type="string" indexed="true" stored="true" required="true" multiValued="false" /> 

<field name="titleCn" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" /> 

<field name="titleEn" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" /> 

<field name="keywordsCn" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" /> 

<field name="keywordsEn" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" />

其中field中的name值与data-config.xml中的name值一样

5重启solr服务

bin/solr restart

执行添加 10万条数据大概用时1m30s

巴特西