Solr工作原理

小咪咪 2021-12-16 12:41 201阅读 0赞

**Solr简介**

Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文件，生成索引；也可以通过Http Get操作提出查找请求，并得到XML格式的返回结果。

想要知道solr的实现原理，首先得了解什么是全文检索、solr的索引创建过程和索引索搜过程。

**1. 全文检索**

举个例子：现在有几个文档，我想从这几个文档中查找出包含“solr工作原理”的文档，此时有两种做法：

1）顺序扫描法：对这几个文档依次查找，包含目标字段的文档就记录下来，最后查找的结果可能在这几个文档中，这种查找方式叫做顺序扫描法。

顺序扫描法在文档数量较少的情况下，查找速度还是很快的，但是文档数量很多时，查找速度就明显不行了。

2）全文检索：对文档内容进行分词，对分词后的结果创建索引，然后通过对索引进行搜索的方式叫做全文检索。

全文检索就相当于根据偏旁部首或读音去查找字典，在文档很多的情况，这种查找速度肯定比一个一个文档查找要快。

**2. 索引创建和搜索过程**

**1）创建索引**

举例：

文档一：solr是基于Lucene开发的企业级搜索引擎技术

文档二：Solr是一个独立的企业级搜索应用服务器，Solr是一个高性能，基于Lucene的全文搜索服务器

首先经过分词器分词，solr会为分词后的结果（词典）创建索引，然后将索引和文档id列表对应起来，如下图所示：

![1705272-20190604173148728-1394502313.png][]

比如：solr在文档1和文档2中都有出现，所以对应的文档ID列表中既包含文档1的ID也包含文档2的ID，文档ID列表对应到具体的文档，并体现该词典在该文档中出现的频次，频次越多说明权重越大，权重越大搜索的结果就会排在前面。

solr内部会对分词的结果做如下处理：

1.去除停词和标点符号，例如英文的this，that等， 中文的”的”,”一”等没有特殊含义的词

2.会将所有的大写英文字母转换成小写，方便统一创建索引和搜索索引

3.将复数形式转为单数形式，比如students转为student，也是方便统一创建索引和搜索索引

**2. 索引搜索过程**

知道了创建索引的过程，那么根据索引进行搜索就变得简单了。

1.用户输入搜索条件

2.对搜索条件进行分词处理

3.对分词后的结果创建索引

4.根据索引找到文档ID列表

5.根据文档ID列表找到具体的文档，根据出现的频次等计算权重，最后将文档列表按照权重排序返回

转载于:https://www.cnblogs.com/rabbitli/p/10975045.html

[1705272-20190604173148728-1394502313.png]: /images/20211214/bb8e961fa6ce4842886f930913e58140.png

发表评论取消回复

表情：

评论列表（有 0 条评论，201人围观）

还没有评论，来说两句吧...

相关阅读

相关 Solr服务原理。

Solr对外提供标准的http接口来实现对数据的索引的增加、删除、修改、查询。在Solr中，用户通过向部署在servlet容器中Solr Web应用程序发送HTTP请求来启动索

淩亂°似流年/ 2024年02月18日 15:59/ 0 赞/ 47 阅读

相关理解solr工作原理：lucene

文章目录 1, 下载lucene, 获取demo相关jar包 2, 源代码实现明细 org.apache.lucene.demo.IndexFil

我会带着你远行/ 2022年11月13日 10:28/ 0 赞/ 197 阅读

相关 Solr服务原理（索引）

摘要：在Solr中，用户通过向部署在servlet容器中的 Solr Web 应用程序发送 HTTP 请求来启动索引和搜索/查询。索引 > Solr的索引servl

た入场券/ 2022年06月16日 00:13/ 0 赞/ 164 阅读

相关 Tomcat工作原理

大致的[架构][Link 1]是 jsp+tomcat+[MySQL][]，记录tomcat学习一点笔记。 Tomcat是Servlet运行环境（容器），每个servlet执

ゝ一纸荒年。/ 2022年06月15日 12:09/ 0 赞/ 299 阅读

相关 solr全文检索实现原理

[solr全文检索实现原理][solr] 　　Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通过http请求，向搜

布满荆棘的人生/ 2022年05月24日 03:20/ 0 赞/ 269 阅读

相关【Solr原理】Leader Shard选举

> Leader Shard的选举原理主要是依靠[LeaderElector.java][]类来实现的。函数checkIfIamLeader开始真正的leader选举，根据

曾经终败给现在/ 2022年05月04日 03:30/ 0 赞/ 203 阅读

相关【Solr启动原理】

> Solr集群启动，都做了哪些事情？做了很多事，over。启动流程大致如下： 1. 启动入口：web.xml。Solr归根结底是个Web服务，必须部署到jetty或者t

古城微笑少年丶/ 2022年04月17日 01:12/ 0 赞/ 249 阅读

相关 spring 工作原理

SpringMVC流程 1、用户发送请求至前端控制器DispatcherServlet。 2、 DispatcherServlet收到请求调用HandlerMapping处

た入场券/ 2022年01月19日 01:19/ 0 赞/ 317 阅读

相关 Solr工作原理

Solr简介 Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文件

小咪咪/ 2021年12月16日 12:41/ 0 赞/ 202 阅读

相关 MyBatis--工作原理

MyBatis工作原理 ![format_png][] 1. 读取 MyBatis 配置文件：mybatis-config.xml 为 MyBatis 的全局配置文件

比眉伴天荒/ 2021年08月13日 16:23/ 0 赞/ 541 阅读