检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
管理SFS Turbo文件系统与OBS桶的存储联动 概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下,您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。
创建一个名称为“sfs-turbo-dedicated-test”的SFS Turbo标准型文件系统,共享协议为NFS,容量为500GB,文件系统所在的可用区编码是example。
只能在ECS/BMS中挂载使用,不能被操作系统应用直接访问,需要格式化成文件系统进行访问。 使用场景 如高性能计算、媒体处理、文件共享和内容管理和Web服务等。 说明: 高性能计算:主要是高带宽的需求,用于共享文件存储,比如基因测序、图片渲染这些。
请选择合法的文件系统路径 400 SFS.TURBO.0103 The file system is being processed 文件系统正在处理中 请等待文件系统处理完成 500 SFS.TURBO.0104 Failed to import or export OBS data
URI DELETE /v1/{project_id}/sfs-turbo/shares/{share_id}/fs/dir 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID share_id 是 String 文件系统ID 请求参数
文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中,也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中,进行云上业务拓展。
文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中,也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中,进行云上业务拓展。
URI DELETE /v1/{project_id}/sfs-turbo/shares/{share_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID share_id 是 String 文件系统ID 请求参数 表2 请求Header
version String SFS Turbo文件系统的版本号。 avail_capacity String SFS Turbo文件系统剩余容量,单位GB。 availability_zone String SFS Turbo文件系统所在可用区编码。
save_checkpoint/load_checkpoint from aiturbo.checkpoint.training.Megatron import save_checkpoint, load_checkpoint 父主题: SFS Turbo文件系统
文件系统 表4 ShareName 参数 是否必选 参数类型 描述 name 是 String 需要修改的SFS Turbo文件系统的名字 响应参数 状态码:204 请求成功 无 请求示例 修改文件系统的名称,需要修改的SFS Turbo文件系统名称为“sfs-turbo-test1
例如:value值为“sfsturbo*”时,返回名称为“sfsturbo”开头的所有资源列表。 表4 Tag 参数 是否必选 参数类型 描述 key 是 String 标签的键。 最大长度128个字符。 key不能为空。
设置配额 登录SFS Turbo弹性文件服务管理控制台。 左侧导航栏选择“SFS Turbo>文件系统列表”,进入SFS Turbo文件系统列表页面。 在SFS Turbo文件系统列表页,单击指定SFS Turbo文件系统的名称,进入详情界面。
URI POST /v1/{project_id}/sfs-turbo/shares/{share_id}/fs/perm-rules 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID share_id 是 String 文件系统ID
SFS Turbo文件系统 管理SFS Turbo文件系统与OBS桶的存储联动 配置LDAP域 管理SFS Turbo目录配额 加密传输 文件系统权限管理 通过AITurbo加速保存与加载checkpoint
文件系统正在创建时,返回该字段;否则不返回。 version String SFS Turbo文件系统的版本号。 avail_capacity String SFS Turbo文件系统剩余容量,单位GB。
URI POST /v1/{project_id}/sfs-turbo/shares/{share_id}/action 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID share_id 是 String 文件系统ID 请求参数 表
如果希望使用另一种规格的SFS Turbo文件系统,不再需要使用之前规格的文件系统,可以先将原文件系统删除/退订后,重新购买新规格的SFS Turbo文件系统。或者购买新规格的SFS Turbo文件系统后,完成文件系统之间的数据迁移,再将原文件系统删除/退订即可。
Array of ShareTypeAvailableZone objects 可用区 spec_code String 文件系统规格编码 storage_media String 存储类型 枚举值: HDD SSD ESSD features Array of strings
name String SFS Turbo文件系统名称。 请求示例 扩容一个文件系统,扩容后的文件系统目标容量是1000GB。