ES05# Elasticsearch节点指标梳理

引言

节点状态GET _nodes/stats，简单的命令返回大量的指标信息，本文就一探究竟拨开主要指标的含义，文章主要内容有：

节点信息说明操作指标说明缓存&事务&恢复指标一、节点信息说明

1.节点数量

"_nodes":{"total":33,"successful":33,"failed":0}

指标说明：

属性	说明
_nodes.total	集群的节点数量
_nodes.successful	正确响应的节点数量
_nodes.failed	失败响应的节点数量

2.IP&角色&属性

"nodes":{"fSoa6g9FQNWOD1upVGrJUg":{"timestamp":1650288221571,"name":"elastic-log-xxx-xxx-es-data-7","transport_address":"x.x.x.x:9300","host":"x.x.x.x","ip":"x.x.x.x:9300","roles":["data_content","data_hot","ingest"],"attributes":{"k8s_node_name":"cn-hangx.x.x.x.x","xpack.installed":"true","transform.node":"false"}//...}//...}

指标说明：

属性	说明
timestamp	收集指标的时间戳
name	节点名称
transport_address	集群内部通信地址端口
host	host地址
IP	IP+端口
roles	该节点被赋予的角色
attributes	节点属性信息

3.文档数量与存储

"indices":{"docs":{"count":1096432845,"deleted":286918},"store":{"size_in_bytes":543284041812,"reserved_in_bytes":0},//...}

指标说明：

属性	说明
docs.count	该节点存储的文档数量
docs.deleted	该节点删除的文档数量
store.size_in_bytes	该节点分片存储大小
store.reserved_in_bytes	预测恢复快照将增长多少

二、操作指标说明1. 索引操作

"indexing":{"index_total":22717470659,"index_time_in_millis":8039662582,"index_current":11,"index_failed":0,"delete_total":390,"delete_time_in_millis":587,"delete_current":0,"noop_update_total":0,"is_throttled":false,"throttle_time_in_millis":0}

指标说明：

属性	说明
index_total	该节点索引操作总次数
index_time_in_millis	该节点索引操作总的耗时
index_current	该节点当前正在执行索引操作的个数
index_failed	该节点索引操作执行失败的个数
delete_total	该节点索引删除操作的总数
delete_time_in_millis	该节点索引删除操作的总耗时
delete_current	该节点当前正在执行索引删除操作的个数
noop_update_total	该节点空操作（更新）的总数
is_throttled	是否被限流
throttle_time_in_millis	限流操作所耗用的时间

2.Get操作指标

返回示例：

"get":{"total":217898,"time_in_millis":24594,"exists_total":211213,"exists_time_in_millis":24306,"missing_total":6685,"missing_time_in_millis":288,"current":0}

指标说明：

属性	说明
total	该节点Get操作总次数
time_in_millis	该节点Get操作总的耗时
exists_total	该节点Get操作成功总次数
exists_time_in_millis	该节点Get操作成功总耗时
missing_total	该节点Get操作失败总次数
missing_time_in_millis	该节点Get操作失败总耗时
current	该节点当前正在执行Get操作的数量

3.Search操作指标

返回示例：

"search":{"open_contexts":0,"query_total":2810350,"query_time_in_millis":37625703,"query_current":0,"fetch_total":1386124,"fetch_time_in_millis":15092328,"fetch_current":0,"scroll_total":122754,"scroll_time_in_millis":1515856,"scroll_current":0,"suggest_total":0,"suggest_time_in_millis":0,"suggest_current":0}

指标说明：

属性	说明
open_contexts	该节点打开查询上下文总的数量
query_total	该节点Query操作总的数量
query_time_in_millis	该节点Query操作总的耗时
query_current	该节点当前正在运行的Query操作数量
fetch_total	该节点fetch操作总的数量
fetch_time_in_millis	该节点fetch操作总的耗时
fetch_current	该节点当前运行fetch操作的数量
scroll_total	该节点scroll操作总的数量
scroll_time_in_millis	该节点scroll操作总的耗时
scroll_current	该节点当前运行scroll操作的数量
suggest_total	该节点suggest操作总的数量
suggest_time_in_millis	该节点suggest操作总的耗时
suggest_current	该节点当前运行suggest操作的数量

4.Merges操作指标

返回示例：

"merges":{"current":8,"current_docs":17109224,"current_size_in_bytes":9829070126,"total":3074176,"total_time_in_millis":10028444483,"total_docs":96464444178,"total_size_in_bytes":47030059786323,"total_stopped_time_in_millis":11215,"total_throttled_time_in_millis":6133172861,"total_auto_throttle_in_bytes":72584133625}

指标说明：

属性	说明
current	该节点正在运行merge操作的数量
current_docs	该节点正在运行merge文本的数量
current_size_in_bytes	该节点正在运行merge文本占用的内存大小
total	该节点merge操作总的数量
total_time_in_millis	该节点merge操作总的耗时
total_docs	该节点merge文档总的数量
total_size_in_bytes	该节点merge文档总的大小
total_stopped_time_in_millis	该节点merge操作停止总的时间
total_throttled_time_in_millis	该节点merge操作限流总的耗时
total_auto_throttle_in_bytes	超过该阈值自动触发merge操作限流

5.refresh操作指标

返回示例：

"refresh":{"total":15285785,"total_time_in_millis":738659952,"external_total":15153381,"external_total_time_in_millis":758721356,"listeners":0}

指标说明：

属性	说明
total	该节点refresh操作总的数量
total_time_in_millis	该节点refresh操作总的耗时
external_total	该节额外refresh操作总的数量
external_total_time_in_millis	该节额外refresh操作总的耗时
listeners	该节refresh listeners的数量

6.flush操作指标

返回示例：

"flush":{"total":90832,"periodic":50676,"total_time_in_millis":71006569}

指标说明：

属性	说明
total	该节点flush刷盘操作总的次数
periodic	该节点周期性触发flush刷盘操作的次数
total_time_in_millis	该节点flush刷盘操作总的耗时

7.warmer操作指标

返回示例：

"warmer":{"current":0,"total":1186361,"total_time_in_millis":45855}

指标说明：

属性	说明
current	该节点正在运行预热索引的数量
total	该节点总共预热索引的数量
total_time_in_millis	该节点总共预热索引的耗时

三、缓存&事务&恢复指标1.query_cache指标

返回示例：

"query_cache":{"memory_size_in_bytes":11514288,"total_count":21172337,"hit_count":7241011,"miss_count":13931326,"cache_size":78,"cache_count":26881,"evictions":26803}

指标说明：

属性	说明
memory_size_in_bytes	查询缓存占用总的大小
total_count	查询缓存总的次数（包括命中+未命中）
hit_count	查询缓存命中的次数
miss_count	查询缓存未命中的次数
cache_size	当前查询缓存中文档的数量
cache_count	查询缓存中总的文档的数量
evictions	查询缓存中被驱逐的数量

2.translog指标

返回示例：

"translog":{"operations":22091013,"size_in_bytes":25272012418,"uncommitted_operations":22091013,"uncommitted_size_in_bytes":25272012418,"earliest_last_modified_age":0}

指标说明：

属性	说明
operations	transaction log操作次数
size_in_bytes	transaction log的大小
uncommitted_operations	未提交transaction操作的数量
uncommitted_size_in_bytes	未提交transaction日志的大小
earliest_last_modified_age	transaction日志存的最久的日志条目时间

3.request_cache指标

返回示例：

"request_cache":{"memory_size_in_bytes":151103,"evictions":0,"hit_count":22922,"miss_count":42233}

指标说明：

属性	说明
memory_size_in_bytes	请求缓存的大小
evictions	请求缓存被驱逐的数量
hit_count	请求缓存的命中数量
miss_count	请求缓存的未命中数量

4.recovery指标

返回示例：

"recovery":{"current_as_source":0,"current_as_target":0,"throttle_time_in_millis":272139765}

指标说明：

属性	说明
current_as_source	源索引分片恢复操作的数量
current_as_target	目标引分片恢复操作的数量
throttle_time_in_millis	恢复操作的延迟时长

备注：其他fielddata、completion、segments以及系统、jvm等指标在上一篇已梳理，不再重复。

关键词： 文档数量 正在执行