概述
更新时间:
平台建议您在代码/启动命令中设置离线训练的输出存放在 /gemini/output/
目录下,以便持久保存,同时也能保证您可以在项目的 任务输出 页中查看。
# 任务输出
专指离线训练的任务输出。离线训练时输出到 /gemini/output/
的信息,会按训练任务在 任务输出 页中新建相应文件夹,您可在文件夹中查看对应的训练输出,同时也可启动 TensorBoard 可视化查看输出内容。
Q:没有对应任务的文件夹?
- 输出目录设置错误,启动命令需设置输出到 /gemini/output/,才会在如图界面中建立文件夹并展示。
- 任务本身没有输出,则训练完成后会自动删除该任务对应的文件夹,建议排查代码是否有问题。
注意:只有 “离线训练” 保存在 /gemini/output/
中的信息才能持久化保存并在 任务输出 页中显示;开发环境保存在 /gemini/output/
中内容在开发环境重启后会被删除。
离线训练时,/gemini/output/
中建议保存训练日志、指标数据、模型文件等所有您想持久化保存下来的数据。
当然,保存需消耗持久化存储,超出免费存储额度将产生费用。
# 功能概览
您在 任务输出 页中可以:
查看训练输出:如上图所示,左边可切换训练任务,右边查看该任务的详细输出。
说明:如果左侧没有您要查看的训练任务或者为空,您需确认以下两点:
- 任务的输出是否设置为 /gemini/output/,只有输出到该路径才会在 任务输出 页显示。
- 这个任务是否有输出,没有输出的任务在任务结束后,其任务输出文件夹会被删掉。
可视化任务输出:可视化即利用 TensorBoard 工具将训练输出以图表的形式展示出来,便于工程师更直观的了解该训练。
管理可视化实例:启动、停止可视化实例,以及修改可视化实例的数据来源和资源规格。
输出转数据:将训练输出中的部分数据保存为平台数据,以便后续关联到开发环境、离线训练中使用。
输出转模型:将训练输出中的部分数据保存为平台模型,以便后续关联到开发环境、离线训练中使用。