告警解释
系统每60分钟执行周期备份任务,如果周期备份任务执行失败,则上报该告警,如果下次备份执行成功,则恢复告警。
告警属性
告警ID | 告警级别 | 是否自动清除 |
---|---|---|
12034 | 重要 | 是 |
告警参数
参数名称 | 参数含义 |
---|---|
来源 | 产生告警的集群或系统名称。 |
服务名 | 产生告警的服务名称。 |
角色名 | 产生告警的角色名称。 |
主机名 | 产生告警的主机名。 |
任务名 | 任务名称。 |
对系统的影响
周期备份任务失败,可能会导致长时间没有可用的备份包,在系统出现异常时,无法恢复。
可能原因
该告警产生原因依赖于该任务的详细情况,直接获取日志和任务详情来处理该告警。
处理步骤
查看磁盘空间是否不足
-
在FusionInsight Manager管理界面,选择“运维 > 告警 > 告警”。
-
在告警列表中单击该告警的,从“定位信息”处获得“任务名”。
-
选择“运维 >备份恢复 > 备份管理”。
-
根据“任务名”查找对应备份任务,单击“操作”栏下的“更多”按钮,在弹出的窗口中单击“查询历史”按钮,查看备份任务的详细信息。
-
在弹出的日志详情窗口中,单击,查看是否有“Failed to backup xx due to insufficient disk space, move the data in
the /srv/BigData/LocalBackup directory to other directories.”的信息。
- 是,执行步骤6。
- 否,执行步骤13。
- 单击“备份路径”下的“查看”,获取备份路径。
- 以root用户登录节点,执行以下命令查看节点挂载详情:
df -h
- 在挂载详情中查看备份路径挂载点的剩余空间是否小于20GB。
- 是,执行步骤9。
- 否,执行步骤13。
- 查看备份目录下是否有很多备份包。
- 是,执行步骤10。
- 否,执行步骤13。
- 将备份包移出备份目录,或者直接删除备份包,直到备份目录挂载节点剩余空间大于20GB。
- 再一次启动该备份任务,查看备份任务是否执行成功。
- 是,执行步骤12。
- 否,执行步骤13。
- 等待2分钟,检查告警是否消除。
- 是,结束操作。
- 否,执行步骤13。
收集故障信息
- 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
- 在“服务”中勾选“Controller”,单击“确定”。
- 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
- 请联系运维人员,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。