云容器引擎支持使用天翼云并行文件存储卷。当前cstor-csi插件支持使用并行文件动态存储卷和静态存储卷,通过将并行文件存储卷挂载到容器指定目录下,以实现数据持久化需求。
并行文件服务提供高性能并行文件存储,支持全 NVMe 闪存、RDMA 技术,最高提供百万 IOPS 和百 GBps 吞吐,同时保证亚毫秒级时延。具有高性能,高可靠性,高可扩展性的特点,充分满足影视渲染、AI 训练、自动驾驶等数据密集型场景的需求。
使用限制
- 插件版本
使用并行文件存储功能,需要cstor-csi插件版本 >=3.3.2 - 容器集群
当前并行文件服务功能仅智算集群可见 - 文件协议
当前cstor-csi插件仅支持HPFS_POSIX协议 - 容量
单个文件系统最小容量为512GB - 可用区
协议类型为hpfs时,不支持跨可用区挂载。 使用并行文件存储PVC的Pod将会被强制调度到该PVC创建时指定的的可用区内 - 其他限制
参见并行文件使用限制
产品优势
- 共享访问
- 支持上千台客户端挂载同一文件系统,实现共享访问。
- 支持 NFS、HPFS_POSIX 协议类型,用户能够在创建文件系统时指定协议类型,通过标准 POSIX 接口访问数据,无缝适配主流应用程序进行数据读写。
- 支持 MPI-I/O 并行计算接口,满足多客户端并行计算场景。
- 弹性扩展
- 采用可扩展的元数据架构,单个文件系统可支持几十亿级别的文件数量,在海量文件场景下,仍然保持稳定持续的高效访问性能。
- 分钟级别快速扩容,用户可根据实际需要对文件系统进行在线扩容,扩容过程 IO 不中断,保障业务连续性。
- 安全可信
- 支持使用 VPC 用户隔离、权限组等安全管理功能进行访问权限控制,保障数据安全可靠。
- 使用多种 EC 方式、热备盘备份保证数据的可靠性。
- 支持 HA,故障时自动切换,服务可用性在99.90%及以上。
- 性能优越
- 可支持高性能100GE 以太网、IB、RoCE 网络。
- 带宽、IOPS 性能可以随文件系统容量线性提升,最高提供百万 IOPS 和百 GBps 吞吐,同时保证亚毫秒级时延,使得数据访问更加高效。
使用场景
根据业务需求,并行文件类型的存储常见以下使用场景:
- 使用并行文件动态存储卷:即用户无需预先创建并行文件系统和PV,只需创建PVC时指定存储类(StorageClass),存储插件cstor-csi就会自动创建并行文件系统及对应PV资源,推荐使用。
- 使用并行文件静态存储卷:即用户预先创建并行文件系统,并创建对应的PV资源。之后在创建PVC时选择已有PV进行挂载。适用于已有可用的底层存储或底层存储需要包周期的场景。
- 有状态负载挂载并行文件:支持有状态负载通过PVC模版的方式,实现为每一个Pod关联一个独有的PVC及PV,当Pod被重新调度后,仍然能够根据该PVC名称挂载原有的数据。
计费说明
通过存储插件动态创建的并行文件服务,默认计费模式为按需订购,不支持包年包月。
关于并行文件的计费详情,请参见并行文件产品计费说明