告警解释
当主Manager节点在7秒内没有收到备Manager节点的心跳信号时,产生该告警。
当主Manager节点收到备Manager节点的心跳信号后,告警恢复。
告警属性
告警ID | 告警级别 | 是否自动清除 |
---|---|---|
12010 | 重要 | 是 |
告警参数
参数名称 | 参数含义 |
---|---|
来源 | 产生告警的集群或系统名称。 |
服务名 | 产生告警的服务名称。 |
角色名 | 产生告警的角色名称。 |
主机名 | 产生告警的主机名。 |
对系统的影响
如果主Manager进程异常,主备倒换无法进行,影响业务。
可能原因
- 主备Manager节点间链路异常。
- 节点名配置错误。
- 防火墙禁用端口。
处理步骤
检查主备Manager服务器间的网络是否正常
1.在FusionInsight Manager页面,选择“运维 > 告警 > 告警”,单击此告警所在行的 ,查看该告警的备Manager服务器(即Peer Manager)IP地址。
2.以root用户登录主Manager服务器。
3.执行ping 备Manager心跳IP地址命令检查备Manager服务器是否可达。
- 是,执行步骤6。
- 否,执行步骤4。
4.联系网络管理员查看是否为网络故障。
- 是,执行步骤5。
- 否,执行步骤6。
5.修复网络故障,查看告警列表中,该告警是否已清除。
- 是,处理完毕。
- 否,执行步骤6。
检查节点名配置是否正确
6.进入软件安装目录。
cd /opt
7.查找主备节点的配置文件目录。
find -name hacom_local.xml
8.进入workspace目录。
cd ${BIGDATA_HOME}/om-server/OMS/workspace0/ha/local/hacom/conf/
9.使用vim命令打开hacom_local.xml,查看local、peer节点配置是否正确,local配置主节点,peer配置备节点。
- 是,执行步骤12。
- 否,执行步骤10。
10.修改hacom_local.xml中主备节点的配置,修改完成后,按Esc回到命令模式,输入命令:wq保存退出。
11.查看此告警信息是否自动清除。
- 是,处理完毕。
- 否,执行步骤12。
检查是否防火墙禁用端口
12.执行命令lsof -i :20012查询主备节点的心跳端口是否打开,有查询结果说明端口已经开放,否则说明端口被防火墙禁用。
- 是,执行步骤13。
- 否,执行步骤16。
13.执行命令iptables -P INPUT ACCEPT,防止与服务器断开。
14.清除防火墙。
iptables -F
15.查看告警列表中,该告警是否已清除。
- 是,处理完毕。
- 否,执行步骤16。
收集故障信息
- 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
- 在“服务”中勾选如下节点信息,单击“确定”。
- OmmServer
- Controller
- NodeAgent
- 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
- 请联系运维人员,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。