分布式搜索引擎elasticsearch的架构原理

1、分布式搜索引擎：把大量的索引数据拆散成多块，每台机器放一部分，然 后利用多台机器对分散之后的数据进行搜索，所有操作全部是分布在多台机器上进行，形成了 完整的分布式的架构。

2、ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。

3、一般情况下如果es服务正常启动，可以通过接口的方式获取elasticsearch版本信息：curlhttp：//1：9200上述命令可以得到elasticsearch的服务状态和其他信息包括版本号。Elasticsearch是位于ElasticStack核心的分布式搜索和分析引擎。

4、起因：在项目开发过程中，要使用到搜索 引擎来对一些关键字实现逆向查询，如果仅用模糊搜索，那么搜索的时间会根据数据量的增大而增大，对比之下就学了elasticsearch，也记录一下，常常回顾。

Elasticsearch之存储原理

1、可以将对es的操作记录下来elasticsearch原理，来确保当出现故障的时候elasticsearch原理，已经落地到磁盘的数据不会丢失elasticsearch原理，并在重启的时候可以从操作记录中将数据恢复过来。

2、Elasticsearch是一个分布式文档存储。Elasticsearch存储的是序列化为 *** ON文档的复杂数据结构，而不是以列行数据的形式存储信息。当集群中有多个Elasticsearch节点时，存储的文档分布在整个集群中，可以立即从任何节点访问。

3、而且，这种存储方式也非常便于压缩，特别是数字类型。

4、shard是Elasticsearch数据存储的最小单位，index的存储容量为所有shard的存储容量之和。Elasticsearch集群的存储容量则为所有index存储容量之和。一个shard就对应elasticsearch原理了一个lucene的library。

ES近实时搜索原理

（1）删除一个ES文档不会立即从磁盘上移除，它只是被标记成已删除。因为段是不可变的，所以文档既不能从旧的段中移除，旧的段也不能更新以反映文档最新的版本。

分布式搜索引擎：把大量的索引数据拆散成多块，每台机器放一部分，然 后利用多台机器对分散之后的数据进行搜索，所有操作全部是分布在多台机器上进行，形成了 完整的分布式的架构。

所以操作是很快的，这就是ES被称为近实时搜索的原因。refresh默认执行的间隔是1秒，可以使用 refreshAPI 进行手动操作，但一般不建议这么做。还可以通过合理设置 refresh_interval 在近实时搜索和索引速度间做权衡。

才能将segment打开供search使用，这样的话，从一个document写入，到它可以被搜索，可能会超过1分钟！！这就不是近实时的搜索了！！主要瓶颈在于fsync实际发生磁盘IO写数据进磁盘，是很耗时的。

es搜索引擎原理：ES 集群架构 13 个节点，索引根据通道不同共 20+索引，根据日期，每日递增 20+，索引：10 分片，每日递增 1 亿+数据，每个通道每天索引大小控制。

query string 后边的参数原来越多，搜索条件越来越复杂，不能满足需求。DSL：Domain Specified Language，特定领域的语言 es特有的搜索语言，可在请求体中携带搜索条件，功能强大。

elasticsearch-倒排索引原理

1、倒排索引采用ImmutableDesignelasticsearch原理，一旦生成，不可更改。Segment写入磁盘elasticsearch原理的过程相对耗时，所以借助文件系统缓存，Refresh时，先将Segment写入文件缓存中，以开放查询。

2、倒排索引采用Immutable Design，一旦生成，不可更改。Segment写入磁盘的过程相对耗时，所以借助文件系统缓存，Refresh时，先将Segment写入文件缓存中，以开放查询。

3、Elasticsearch 使用一种称为倒排索引的结构，它适用于快速的全文搜索。一个倒排索引由文档中所有不重复词的列表构成，对于其中每个词，有一个包含它的文档列表。es使用称为倒排索引的结构达到快速全文搜索的目的。

4、之前我们已经elasticsearch原理了解过，Elasticsearch 是一个基于 Lucene 实现的分布式全文检索引擎，其实 Elasticsearch 倒排索引就是 Lucene 的倒排索引。

5、倒排索引被写入磁盘后是不可变的，ES解决不变性和更新索引的方式是使用多个索引，利用新增的索引来反映修改，在查询时从旧的到新的依次查询，最后来一个结果合并。

从查询重写角度理解elasticsearch的高亮原理

1、Term Index 其实也可以理解为一个树形结构，从 Term 的之一个字母开始进行之一层排序，如果有多个 Term 首字母相同，则从该字母为起始点进行第二层排序，如果以该字母为首的只有一个 Term，则不再进行第二次排序。

2、Elasticsearch的查询原理是将查询的关键词与倒排索引中的词条进行匹配，查询的关键词与倒排索引中的词条必须完全相同视为匹配，否则不匹配。这意味着在插入文档时是否进行分析和查询时是否进行分析将产生非常不同的结果。

3、默认节点会去加入一个名 称为 elasticsearch 的集群。如果直接启动一堆节点，那么它们会自动组成一个elasticsearch 集群，当然一个节点也可以组成 elasticsearch 集群。

关于elasticsearch原理和elasticsearch原理图的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。