solr spellcheck 拼写检查开启经历

本是古典何须时尚 2022-01-14 22:17 276阅读 0赞

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][]

该功能主要通过 solrconfig.xml 和 managed-schema 两个文件的修改完成

1.managed-schema 文件修改，做准备工作，这里我之前使用了IK分词器，可以改为自己正在使用的，第二个fieldType 是一个注意点！！尤其是使用中文的拼写检查的时候

2.修改 solrconfig.xml  配置文件

第一步 ，修改 searchComponent 组件建议查询的字段，我这里把 field 改为 text，text为多个字段的复制值，这里把多余的配置删除了，只贴了这一个，后续使用的时候也只是使用的这个，引入第三方词典可以根据自己需要开启  ，两个比较重要的字段单独说明一下name =default ，后续会使用，maxEdits 最大容错的字数，minQueryLength 最小的检测字符串长度，其它可以参考[官方文档][Link 1]详细了解

<searchComponent name="spellcheck" class="solr.SpellCheckComponent">
        <lst name="spellchecker">
          <str name="name">default</str>
          <str name="field">text</str>
          <str name="classname">solr.DirectSolrSpellChecker</str>
          
          <str name="distanceMeasure">internal</str>
          
          <float name="accuracy">0.5</float>
          
          <int name="maxEdits">2</int>
          
          <int name="minPrefix">1</int>
          
          <int name="maxInspections">5</int>
          
          <int name="minQueryLength">4</int>
          
          <float name="maxQueryFrequency">0.01</float>
          
        </lst>
    </searchComponent>

第二步，修改spell  requestHandler 请求处理器，当然也可以配置到 select里面，这里我只做了一个修改，屏蔽掉了<str name="spellcheck.dictionary">wordbreak</str> 因为分词的检测结果不是我期望的，可以自己开启和关闭做一下测试，注意：如过这里使用多个spellcheck，这些spellcheck的field使用的分词器必须一致，不然会报错 All checkers need to use the same Analyzer

<requestHandler name="/spell" class="solr.SearchHandler" startup="lazy">
        <lst name="defaults">
          
          <str name="spellcheck.dictionary">default</str>
          
          <str name="spellcheck">on</str>
          <str name="spellcheck.extendedResults">true</str>
          <str name="spellcheck.count">10</str>
          <str name="spellcheck.alternativeTermCount">5</str>
          <str name="spellcheck.maxResultsForSuggest">5</str>
          <str name="spellcheck.collate">true</str>
          <str name="spellcheck.collateExtendedResults">true</str>
          <str name="spellcheck.maxCollationTries">10</str>
          <str name="spellcheck.maxCollations">5</str>
        </lst>
        <arr name="last-components">
          <str>spellcheck</str>
        </arr>
    </requestHandler>

![9fd6cdcd7e74ccd16fcb21757fce78c9d26.jpg][]

如果开启了 wordbreak

![f157622dd98d7a88d090c4343491ac20e0b.jpg][]

3.通过命令建立词典

[http://\*\*\*\*:8983/solr/main\_collection/spell?q=\*%3A\*&wt=json&indent=true&spellcheck.build=true][http_8983_solr_main_collection_spell_q_3A_wt_json_indent_true_spellcheck.build_true]

竣工，比较简单，我的需求是要第一个，可以根据自己的需求选择自己需要的spellcheck，当然也可以自定义

补充：历史遗留项目 使用的 solr 版本 5.3 ，DirectSolrSpellChecker  和 file 第三方字典好像不能同时使用？待确认

技术交流群：208779755  如有问题欢迎加群讨论

转载于:https://my.oschina.net/haitaohu/blog/3056387

[2019_Python_]: https://my.oschina.net/u/2663968/blog/3061697
[hot3.png]: /images/20220114/667675ba34544ec8b0b5684a45111359.png
[Link 1]: https://www.w3cschool.cn/solr_doc/solr_doc-j9lk2gxe.html
[9fd6cdcd7e74ccd16fcb21757fce78c9d26.jpg]: /images/20220114/51b241836ebc49b698b9c7677d37ec61.png
[f157622dd98d7a88d090c4343491ac20e0b.jpg]: /images/20220114/071a3e5981854a36939baf17ad8f7524.png
[http_8983_solr_main_collection_spell_q_3A_wt_json_indent_true_spellcheck.build_true]: http://solrtest.cn-healthcare.com:8983/solr/main_collection/spell?q=*%3A*&wt=json&indent=true&spellcheck.build=true