训练日志用于记录训练任务运行过程和异常信息,为快速定位训练任务运行中出现的问题提供了详细信息。训练代码中的标准输出、标准错误信息会在训练任务日志中呈现。当训练任务运行遇到问题时,可首先查看日志,多数场景下的问题可以通过日志报错信息直接定位。
训练日志的时效性
从日志的时效维度分为以下两种情况的日志:
实时日志:训练任务运行时实时产生的日志,在训练任务详情页内可查看。
历史日志:训练作业结束后,可以在训练任务详情页内查看历史日志,跟随运行记录消失而消失。
永久日志:转存到ZOS存储的训练日志,在创建训练任务时,打开永久保存日志开关设置训练日志路径即可将日志转存至ZOS路径。
查看训练日志
在训练任务详情页点击运行ID可进入运行详情页面,点击“日志”页签,可查看实时日志和历史日志,支持查看不同实例的日志,通过下拉框可以选择目标实例。