准备数据迁移前,需要提供能挂载 HPFS 文件系统的迁移服务器(物理机或弹性云主机),用户在迁移服务器上同时可以访问待迁移数据,这样就可以在迁移服务器上进行数据拷贝了。如果是用户提供存储介质的方式,那么需要将该存储介质安装到迁移服务器上。如果能够满足并行数据拷贝的条件,可以增加迁移服务器的个数,各自并行负责一部分数据的迁移,这样可以大幅提高数据拷贝的效率。
说明
迁移服务器仅作为数据迁移的“中转站”,而非用于业务实际使用。待数据迁移完成之后可投入业务使用,或者根据实际情况停用。
在迁移之前,请确认目标文件系统可用存储空间是否满足源数据所需存储空间。
常见的数据迁移场景、迁移方法、使用限制等如下,您可以根据待迁移数据的情况选择合适的方法:
数据所在位置 使用条件 迁移方法 迁移速度评估 使用限制 物理机文件系统
物理机可以访问待迁移数据;
物理机和HPFS网络互通,保证可挂载文件系统;
命令拷贝
速度速度取决于物理机网卡,可多台并行拷贝,提高速度。
只支持GPU裸金属物理机挂载 HPFS_POSIX 协议的并行文件系统。
弹性云主机文件系统
云主机可以访问待迁移数据;
弹性云主机和HPFS在同一VPC网络下,保证可挂载文件系统;
速度取决于云主机配置的网络带宽,可多台并行拷贝,提高速度。
只支持云主机挂载NFS协议的并行文件系统。
对象存储ZOS数据
ZOS数据可以在互联网/内网环境下载;
互联网/内网下载的客户端和HPFS互通,保证可挂载文件系统;
工具迁移
客户端测公网出口带宽直接影响上传时间。
通过互联网访问ZOS的数据,迁移过程会产生请求和流量等相关的费用。
客户本地
用户本地数据量巨大(几十TB),且数据归属于客户,可插拔盘操作;
用户在公有云有独立归属的数据迁移服务器可进行插盘操作;
数据迁移服务器和HPFS互通,保证可挂载文件系统;
数据快递
单USB口的机械硬盘可达到150MB/s
专属资源的客户,拥有独立的机房设备。