告警解释
系统每300秒周期性检测HBase服务的compaction队列长度,当检测到HBase服务的compaction队列长度超过告警的阈值(默认100)时产生该告警。当compaction队列长度小于告警的阈值时,告警恢复。
说明
说明若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示服务名=HBase-1,处理步骤中的操作对象也应由HBase调整为HBase-1。
告警属性
告警ID | 告警级别 | 是否自动清除 |
---|---|---|
19018 | 次要 | 是 |
告警参数
参数名称 | 参数含义 |
---|---|
来源 | 产生告警的集群名称。 |
服务名 | 产生告警的服务名称。 |
角色名 | 产生告警的角色名称。 |
主机名 | 产生告警的主机名。 |
对系统的影响
产生该告警表示HBase服务的compaction队列长度已经超过规定的阈值,如果不及时处理,可能会导致集群性能下降,影响数据读写。
可能原因
- HBase RegionServer数太少。
- HBase 单个RegionServer上Region数过多。
- HBase RegionServer堆大小较小。
- 资源不足。
- 相关参数配置不合理。
处理步骤
检查相关配置是否合理
1.在FusionInsight Manager首页,选择“运维 > 告警 > 告警”,查看是否存在告警ID为“19011”的告警。
- 是,单击对应告警右侧的“查看帮助”并按照帮助文档进行处理,执行步骤3。
- 否,执行步骤2。
2.在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > HBase > 配置 > 全部配置,搜索“hbase.hstore.compaction.min”,“hbase.hstore.compaction.max”,“hbase.hstore.compactionThreshold”,“hbase.regionserver.thread.compaction.small”和“hbase.regionserver.thread.compaction.throttle”,适当调大其值。
3.观察界面告警是否清除。
- 是,处理完毕。
- 否,执行步骤4。
收集故障信息
4.在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
5.在“服务”中勾选待操作集群的“HBase”。
6.单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
7.请联系运维人员,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。