检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用CTS审计SFS Turbo文件系统 支持审计的关键操作 查询SFS Turbo审计事件 父主题: 监控与审计
IDC专线通过域名挂载SFS Turbo文件系统 操作场景 虚拟专用网络、云专线线下节点通过终端节点高速访问20MB/s/TiB、40MB/s/TiB、125MB/s/TiB、250MB/s/TiB、500MB/s/TiB、1000MB/s/TiB等类型的SFS Turbo文件系统
文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中,也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中,进行云上业务拓展。
如何在Linux系统中删除大量文件或文件夹 当文件数量过多时,您可以使用以下常用方式删除大量文件或文件夹,提高删除速度和预防文件系统卡顿。 rm命令 删除当前目录下所有文件:“*”代表当前目录下所有文件。
SFS Turbo创建失败 问题描述 创建SFS Turbo文件系统时,文件系统创建失败。 排查思路 以下排查思路根据原因的出现概率进行排序,建议您从高频率原因往低频率原因排查,从而帮助您快速找到问题的原因。 如果解决完某个可能原因仍未解决问题,请继续排查其他可能原因。
单击“充值”,系统自动跳转到充值界面。 根据界面提示信息,对账户进行充值。 充值成功后,退出充值界面,返回管理控制台首页。 使用高性能弹性文件服务。 进入SFS Turbo管理控制台。 单击“创建文件系统”。 使用阶段SFS Turbo文件系统按购买时选择的存储容量和时长计费。
管理SFS Turbo文件系统与OBS桶的存储联动 概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下,您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。
创建一个名称为“sfs-turbo-dedicated-test”的SFS Turbo标准型文件系统,共享协议为NFS,容量为500GB,文件系统所在的可用区编码是example。
fio --version 文件系统性能数据 SFS Turbo文件系统的性能主要有IOPS和吞吐量等指标,具体各指标数据参见表1。
一个SFS Turbo文件系统最多支持同时挂载到多少台云服务器上 20MB/s/TiB、40MB/s/TiB、125MB/s/TiB、250MB/s/TiB、500MB/s/TiB、1000MB/s/TiB、HPC缓存型(停售)等类型的SFS Turbo文件系统最多支持同时挂载到3000
文件系统类型 本章节介绍了各种类型的SFS Turbo文件系统的特点、优势及应用场景。
自定义创建SFS Turbo文件系统策略 如果系统预置的SFS Turbo权限,不满足您的授权要求,可以创建自定义策略。自定义策略中可以添加的授权项(Action)请参考权限及授权项说明。
解决方法 如果已挂载文件系统,请先参考卸载SFS Turbo文件系统完成卸载操作。 参考挂载SFS Turbo文件系统到Linux云服务器完成挂载前准备。 挂载文件系统时,使用如下命令进行挂载。
原生Pytorch系框架在保存checkpoint时均直接持久化到存储系统,耗时与模型大小、存储的IO性能等密切相关,往往需要几分钟到几十分钟不等,为了保证训练状态的一致性,保存checkpoint时训练必须暂停,保存时间影响了训练过程的整体效率。
提升Linux操作系统单客户端访问SFS Turbo的性能 操作场景 nconnect是Linux操作系统下NFS客户端的挂载参数,开启后支持NFS客户端与服务端之间建立多条TCP连接来提升吞吐性能。 前提条件 Linux内核为5.3及以上版本。
步骤一:创建SFS Turbo文件系统 创建一个SFS Turbo文件系统。 步骤二:挂载SFS Turbo文件系统 将SFS Turbo文件系统挂载到ECS实例上。 步骤三:使用SFS Turbo文件系统 使用SFS Turbo文件系统,实现上传和下载文件等操作。
fio --version 文件系统性能数据 SFS Turbo文件系统的性能主要有IOPS和吞吐量等指标,具体各指标数据参见表1。
例如:value值为“sfsturbo*”时,返回名称为“sfsturbo”开头的所有资源列表。 表4 Tag 参数 是否必选 参数类型 描述 key 是 String 标签的键。 最大长度128个字符。 key不能为空。
SFS Turbo删除类问题 如何删除.nfs类型的文件 如何提高SFS Turbo文件系统复制和删除操作的效率 如何在Linux系统中删除大量文件或文件夹
支持审计的详细操作列表 表1 云审计服务支持的SFS Turbo操作列表 操作名称 资源类型 事件名称 创建文件系统 sfs_turbo createShare 删除文件系统 sfs_turbo deleteShare 查看追踪事件 登录管理控制台。