工具简介
zosfs是一个通过FUSE技术,将天翼云对象存储ZOS的bucket(存储桶)挂载为本地目录的工具。
zosfs利用gorountine,通过异步的并发操作,实现对本地文件的高效上传、对云端对象的高效下载,同时,zosfs也优化了对目录列举的操作,提升目录列举的效率。
使用场景
zosfs主要支持模型训练、模型推理等计算密集型场景,解决密集计算对存储数据加载和写入的特殊需要。具体而言,这类场景对存储数据操作以顺序读取、随机读取、顺序(追加)写入为主。
主要功能
- 兼容基础的POSIX语义操作,能有效利用ZOS的服务端读写能力。
- 针对计算密集的数据读写需要,提供高效的大文件顺序读写能力。
适配环境
- 计算平台:X86计算平台
- 操作系统:ctyunOS 23.01、ctyunOS 2.0.1、ctyunOS 22.06
使用限制
zosfs为特定挂载场景优化,因此存在一定的使用限制,请使用前仔细阅读zosfs使用限制章节,了解工具的限制条件。
注意我们建议您在使用zosfs工具前,了解工具的使用限制,并对工具进行使用测试,避免对您的业务产生影响。
获取zosfs
说明该测试版提供的zosfs工具包,无需解压即可直接运行。