聊聊 Elasticsearch 的查询毛刺
如果业务对查询延迟很敏感，Elasticsearch 查询延迟中的毛刺现象就是比较困扰的一类问题，由于出现毛刺的时间点已经过去，无法稳定复现，对于根因的分析比较…
Elasticsearch 7.7 的异步搜索原理解析
Elasticsearch 7.7 的异步搜索 AsyncSearch 原理解析 Elasticsearch 7.7 版本带来一个新的特性，search 过程允…
Elasticsearch 中增加分片数量，聚合一定会变快吗？
在一次聚合测过程中，我们希望通过增加分片数量的方式，让聚合计算过程更快完成。因此准备了一个索引，该索引有2.6亿 条 doc，大小为70GB，有2个分片。命名为…
Elasticsearch 查询过程中的 pre-filter 原理
Elasticsearch 查询过程中的 pre-filter 原理 大家都知道在对索引执行查询的时候，需要在所有的分片上执行查询，因为无法知道被查询的关键词位…
Elasticsearch 7.3 的 offheap 原理
一直以来，ES 堆中常驻内存中占据比重最大是 FST，即 tip(terms index) 文件占据的空间，1TB 索引大约占用2GB 或者更多的内存，因此为了…
关于 Elasticsearch 时区的小知识
我们有一个监控系统使用telegraf 作为采集器，按天生成索引（由 telegraf 创建），写入到 Elasticsearch 中，有位同学发现，索引会包含…
MALLOC_ARENA_MAX=1 与 MALLOC_ARENA_MAX=4有什么区别？
2019年 Elastic开发者大会的时候我曾经说过 glibc 导致的堆外内存过多问题： 如果应用程序每次分配内存的时候都通过系统调用 mmap，sbrk等来…
Elasticsearch 7.4的 soft-deletes 是个什么鬼
新概念 从 Elasticsearch 7.4 开始，peer-recovery（副分片的恢复）不再依赖从主分片拉取 translog。在 6.0-7.3的版本…
深入理解 Elasticsearch 7.x 新的集群协调层
ES 7.x 重构了一个新的集群协调层，他实际上是 Raft 的实现，但并非严格按照 Raft 论文实现，而是做了一些调整，不过话说自己实现 Raft 协议的时…
一次 jbd2进程导致磁盘 io 高的分析解决过程
故障现象 在3节点组成的大数据集群中，混部了 ES，kafka，zk，pg，mysql，spark，yarn，hdfs，以及业务的 etl 程序等组件。起初发现…