检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
只能在ECS/BMS中挂载使用,不能被操作系统应用直接访问,需要格式化成文件系统进行访问。 使用场景 如高性能计算、媒体处理、文件共享和内容管理和Web服务等。 说明: 高性能计算:主要是高带宽的需求,用于共享文件存储,比如基因测序、图片渲染这些。
文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中,也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中,进行云上业务拓展。
如果您想通过API调用完成文件系统权限管理,请参考《高性能弹性文件服务API参考》权限管理章节。 登录SFS Turbo管理控制台。 在SFS Turbo文件系统列表中,找到待添加授权地址的SFS Turbo文件系统并单击目标文件系统名称,进入文件系统详情界面。
设置配额 登录SFS Turbo弹性文件服务管理控制台。 左侧导航栏选择“SFS Turbo>文件系统列表”,进入SFS Turbo文件系统列表页面。 在SFS Turbo文件系统列表页,单击指定SFS Turbo文件系统的名称,进入详情界面。
管理SFS Turbo文件系统与OBS桶的存储联动 概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下,您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。
save_checkpoint/load_checkpoint from aiturbo.checkpoint.training.Megatron import save_checkpoint, load_checkpoint 父主题: SFS Turbo文件系统
文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中,也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中,进行云上业务拓展。
父主题: SFS Turbo文件系统数据迁移
SFS Turbo文件系统 管理SFS Turbo文件系统与OBS桶的存储联动 配置Active Directory 配置LDAP域 管理SFS Turbo目录配额 加密传输 管理SFS Turbo文件系统权限 通过AITurbo加速保存与加载checkpoint
如果希望使用另一种规格的SFS Turbo文件系统,不再需要使用之前规格的文件系统,可以先将原文件系统删除/退订后,重新购买新规格的SFS Turbo文件系统。或者购买新规格的SFS Turbo文件系统后,完成文件系统之间的数据迁移,再将原文件系统删除/退订即可。
前提条件 已创建SFS Turbo文件系统,并获取到文件系统的挂载地址。创建SFS Turbo文件系统的步骤请参见创建SFS Turbo文件系统,挂载SFS Turbo文件系统到云服务器的步骤请参见挂载SFS Turbo文件系统。 已提前创建迁移集群,创建步骤请参见创建集群。
SFS Turbo文件系统数据迁移 方案概述 通过MGC将OBS桶内数据迁移至SFS Turbo 通过MGC批量迁移数据至SFS Turbo 通过云专线迁移(rclone工具) 跨服务器迁移(rclone工具) 通过云专线迁移(rsync工具) 文件系统之间迁移数据
图3 加域成功的展示信息 退域操作步骤 登录SFS Turbo管理控制台。 单击“SFS Turbo > 文件系统列表”,进入SFS Turbo文件系统列表中。
stunnel会监听本地端口,并将发到其上的流量加密转发到SFS Turbo文件系统,要使用加密传输功能需要先安装stunnel。
SFS Turbo文件系统状态 SFS Turbo文件系统状态要素说明 返回值 说明 100 CREATING,正在创建。 200 ACTIVE,激活状态,SFS Turbo文件系统可挂载。 300 FAILED,失败。 303 CREATE_FAILED,创建失败。
SFS容量型文件系统暂时不支持跨区域挂载。文件系统只能挂载至同一区域的弹性云服务器上。 通用文件系统不支持跨区域挂载。 SFS Turbo支持同区域(region)下跨可用区(AZ)挂载。
跨服务器迁移(rclone工具) 父主题: SFS Turbo文件系统数据迁移
SFS Turbo文件系统子状态 SFS Turbo文件系统子状态要素说明 返回值 说明 121 在线扩容中。 221 在线扩容成功。 321 在线扩容失败。 父主题: 公共参数
本章节介绍如何为SMB协议类型的SFS Turbo文件系统配置AD域。加域是通过将SFS Turbo文件系统的挂载点接入AD域内,您可以在AD域中实现文件系统用户身份的认证管理和文件级别的访问权限控制。 请提交工单申请使用该功能。
文件系统管理 创建文件系统异步任务 获取文件系统异步任务列表 获取文件系统异步任务详情 取消/删除文件系统异步任务 获取已挂载的客户端ip信息 配置hpc缓存型后端信息 父主题: SFS Turbo API说明