elasticsearch | IT懒猫 - 技术成就梦想

Elasticsearch脑裂问题分析

elasticsearch脑裂现象 elasticsearch脑裂现象直白的表述就是一个大的es集群分裂成了多个小的集群。比如有 a b c d 四个es节点，a b c d 之间选取一个master，比如master是a。若某时刻 c d 访问不到a ，b能访问到a。c d之间会重新选举一个master。这样整个a b c d的es集群就会分裂为a b 和 b c 两个集群。正常情况下，当主...

博客 2023-11-05 233 标签: elasticsearch

阅读详细

Elasticsearch 向量计算支持 dense_vector 类型数据搜索，向量相似度计算

Elasticsearch 现在是支持向量数据计算的，向量属性类型为 "dense_vector" 参考Mapping { "mappings": { "properties": { "my_dense_vector": { "type": "de...

脚本代码 2023-08-16 385 标签: elasticsearch

阅读详细

lucene term index索引

Term Index 层为了能快速找到某个term，将所有的term排个序，二分法查找term，logN的查找效率，就像通过字典查找一样，这就是Term Dictionary（这是第一步的加速）。现在再看起来，似乎和传统数据库通过B-Tree的方式类似啊，为什么说比B-Tree的查询快呢？ B-Tree通过减少磁盘寻道次数来提高查询性能，Lucene也是采用同样的思路，直接通过内存查找term，...

博客 2023-04-20 284 标签: elasticsearch

阅读详细

Lucene中的跳跃表结构(Skip list)

为了提高查找的性能，Lucene在很多地方采取的跳跃表的数据结构。跳跃表(Skip List)是如图的一种数据结构，有以下几个基本特征：元素是按顺序排列的，在Lucene中，或是按字典顺序排列，或是按从小到大顺序排列。跳跃是有间隔的(Interval)，也即每次跳跃的元素数，间隔是事先配置好的，如图跳跃表的间隔为3。跳跃表是由层次的(level)，每一层的每隔指定间隔的元素构成上一层，如...

博客 2023-04-20 241 标签: elasticsearch

阅读详细

Lucene索引解析

按照数据的分类，搜索也分为两种：对结构化数据的搜索：如对数据库的搜索，用SQL语句。再如对元数据的搜索，如利用windows搜索对文件名，类型，修改时间进行搜索等。对非结构化数据的搜索：如利用windows的搜索也可以搜索文件内容，Linux下的grep命令，再如用Google和百度可以搜索大量内容数据。对非结构化数据也即对全文数据的搜索主要有两种方法：顺序扫描法(Seri...

博客 2023-04-20 256 标签: elasticsearch

阅读详细

记一次elasticsearch查询报错，java.lang.RuntimeException: ElasticsearchStatusException[Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed]]

工作中遇到了一个特别可笑的事情，一个白痴的菜鸟开发写的查询逻辑触发了一个 elasticsearch查询语法错误，错误报错是这样的 java.lang.RuntimeException: ElasticsearchStatusException[Elasticsearch exception [type=search_phase_execution_exception, reason=all s...

博客 2023-03-27 592 标签: elasticsearch

阅读详细

Elasticsearch reindex 重建索引脚本处理数据数组list组装

elasticsearch中很多时候需要导数据或者版本升级或者备份数据的情况下需要重建索引这里使用到 _reindex rest接口代码实例参考： POST _reindex { "source": { "index": "goods01", "_source": ["goodsI...

脚本代码 2023-02-17 268 标签: elasticsearch

阅读详细

elasticsearch 搜素实现精确匹配(完全匹配)

搜索精确匹配场景我们查文档常使用顺序匹配。我们需要在文档中顺序扫描，找到完全匹配的子句。有的情况精确匹配比搜索引擎的查找有优势，比如这样的内容”chinese:1388838245“，如果用户输入”883“希望搜到这则内容，在常规的情况下是搜不到的。这是因为在有了搜索引擎后，我们对查询语句做的处理就不一样了。我们通常会先分词，然后查找对应的词条索引，最后得到评分由高到低的文档列表。上面的例句在...

博客 2022-11-16 695 标签: elasticsearch

阅读详细

elasticsearch返回结果超过10000解决方法，elasticsearch查询结果总数上限调整

现象阐述测试 elasticsearch版本 7.9.0 Elasticsearch官方默认限制索引查询最多只能查询10000条数据，查询第10001条数据开始就会报错：很多开发场景拿elasticsearch当做数据库使用，需要返回表的总数量，虽然这种场景不建议这样使用，但es其实是可以支持的(拿es当数据库用的基本是小白或者菜鸟级的开发)。产生上述报错的原因是： elasticsea...

博客 2022-11-11 1079 标签: elasticsearch

阅读详细

elasticsearch -java client介绍

elasticsearch支持的cient 参考连接：https://www.elastic.co/guide/en/elasticsearch/client/index.html java high level rest client https://www.elastic.co/guide/en/elasticsearch/client/java-rest/current/index.h...

脚本代码 2022-09-26 475 标签: elasticsearch java

阅读详细

catroom

elasticsearch | IT懒猫 - 技术成就梦想

Elasticsearch脑裂问题分析

Elasticsearch 向量计算支持 dense_vector 类型数据搜索，向量相似度计算

lucene term index索引

Lucene中的跳跃表结构(Skip list)

Lucene索引解析

记一次elasticsearch查询报错，java.lang.RuntimeException: ElasticsearchStatusException[Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed]]

Elasticsearch reindex 重建索引脚本处理数据数组list组装

elasticsearch 搜素实现精确匹配(完全匹配)

elasticsearch返回结果超过10000解决方法，elasticsearch查询结果总数上限调整

elasticsearch -java client介绍

catroom

elasticsearch | IT懒猫 - 技术成就梦想

Elasticsearch脑裂问题分析

Elasticsearch 向量计算支持 dense_vector 类型数据搜索，向量相似度计算

lucene term index索引

Lucene中的 跳跃表结构(Skip list)

Lucene索引解析

记一次elasticsearch查询报错，java.lang.RuntimeException: ElasticsearchStatusException[Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed]]

Elasticsearch reindex 重建索引 脚本处理数据 数组list组装

elasticsearch 搜素实现精确匹配(完全匹配)

elasticsearch返回结果超过10000解决方法，elasticsearch查询结果总数上限调整

elasticsearch -java client介绍

catroom

Lucene中的跳跃表结构(Skip list)

Elasticsearch reindex 重建索引脚本处理数据数组list组装