告警解释
进程健康检查模块按5秒周期检测进程状态。当进程健康检查模块连续三次检测到进程连接状态为故障时,产生该告警。
当进程连接正常时,告警恢复。
告警属性
告警ID | 告警级别 | 是否自动清除 |
---|---|---|
12007 | 重要 | 是 |
告警参数
参数名称 | 参数含义 |
---|---|
来源 | 产生告警的集群或系统名称。 |
服务名 | 产生告警的服务名称。 |
角色名 | 产生告警的角色名称。 |
主机名 | 产生告警的主机名。 |
对系统的影响
该进程提供的业务不可用。
可能原因
- 实例进程异常。
- 磁盘空间不足。
说明如果同一时间段,存在大量的进程故障告警,则可能存在安装目录文件被误删除或者权限被修改。
处理步骤
检查实例进程是否异常
1.打开FusionInsight Manager页面,选择“运维 > 告警 > 告警”,单击此告警所在行的 ,单击主机名查看该告警的主机名称与服务名称。
2.在“告警”页面,查看是否有ALM-12006 节点故障告警产生。
- 是,执行步骤3。
- 否,执行步骤4。
3.按ALM-12006 节点故障提供的步骤处理该告警。
4.以root用户登录该告警的主机地址。查看告警角色所在安装目录用户、用户组、权限等是否正常。正常用户、用户组、权限为“omm:ficommon 750”。
例如:NameNode的安装目录为“${BIGDATA_HOME}/FusionInsight_Current/1_8_NameNode/etc”。
- 是,执行步骤6。
- 否,执行步骤5。
5.执行如下命令将文件夹权限修改为“750”,并将“用户:属组”修改为“omm:ficommon”。
chmod 750 <folder_name>
chown omm:ficommon <folder_name>
6.等待5分钟,查看告警列表中,“ALM-12007 进程故障”告警是否已清除。
- 是,处理完毕。
- 否,执行步骤7。
检查磁盘空间是否不足
7.在FusionInsight Manager的告警列表中,查看是否有“ALM-12017 磁盘容量不足”告警产生。
- 是,执行步骤8。
- 否,执行步骤11。
8.按ALM-12017 磁盘容量不足提供的步骤处理该故障。
9.等待5分钟,查看告警列表中,“ALM-12017 磁盘容量不足”告警是否已清除。
- 是,执行步骤10。
- 否,执行步骤11。
10.等待5分钟,查看告警列表中,该告警是否已清除。
- 是,处理完毕。
- 否,执行步骤11。
收集故障信息
11.在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
12.根据在步骤1获取的服务名称,在“服务”中勾选对应的组件及“NodeAgent”,单击“确定”。
13.单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
14.请联系运维人员,并发送已收集的故障日志信息。