Fabric使用流程 Fabric平台提供了一个Serverless化的从数据到模型部署的AI全流程开发体验,针对每个环节,其使用是相对独立自由的。本章节梳理了Fabric使用流程详解,您可以选择其中一种方式完成AI开发。 表1 使用流程说明 流程 说明 详细指导 创建工作空间
创建IAM用户并授权使用Fabric 在使用Fabric相关功能之前,您需要提前做好准备工作,包括开通账号、开通与配置账号子账号权限、创建工作空间等。本章节详细介绍创建IAM用户并授权使用Fabric操作步骤。 前提条件 已有可正常使用的华为云账号。 操作步骤 登录华为云控制台,
数智融合服务软件开发工具包(DataArts Fabric SDK,DataArts Fabric Software Development Kit)是对Fabric服务提供的REST API进行的封装,以简化用户的开发工作。用户直接调用Fabric SDK提供的接口函数即可实现使用Fabric服务业务能力的目的。
API概览 通过使用Fabric服务所提供的接口,您可以完整的使用Fabric服务的基本功能。Fabric服务提供的具体API如表1所示。 表1 Fabric服务API概览 类型 子类型 说明 Fabric-admin 服务健康检查 服务健康检查。 用户协议管理 用户协议管理。 委托管理
lakeformation:agency:describe 否 Fabric服务使用LakeFormation服务所需的权限。如果需要对接LakeFormation,则需要开启。 FABRIC_SMN_POLICY smn:topic:publish 否 Fabric服务使用消息通知服务所需的权限。如果需要消息通知能力,则需要开启。
的对接集成。 控制台方式 Fabric支持通过管理控制台访问,包含Ray作业、模型部署、模型推理等功能。您可以在管理控制台端到端完成您的数据、AI开发。 API方式 如果您需要将Fabric集成到第三方系统,用于二次开发,请使用API方式访问Fabric。具体操作和API详细描述,请参见API参考。
区域项目中都生效。访问Fabric时,需要先切换至授权区域。 下表列出了Fabric所有的系统权限。 表2 Fabric系统权限 系统角色/策略名称 描述 类别 依赖关系 DataArtsFabricFullPolicy Fabric服务的所有权限。 系统策略 IAM Agency
规格选择列表中可以看到所有的规格,选择的规格可根据创建的Ray资源向下兼容,例如创建了一个fabric.ray.dpu.d4x的资源,在选择head规格时可以选择fabric.ray.dpu.d1x、fabric.ray.dpu.d2x、fabric.ray.dpu.d4x,即一个大的资源规格可以被拆分为多个小的资源规格。
规格选择列表中可以看到所有的规格,选择的规格可根据创建的Ray资源向下兼容,比如创建了一个fabric.ray.dpu.d4x的资源,那么在选择head规格的时候可以选择fabric.ray.dpu.d1x、fabric.ray.dpu.d2x、fabric.ray.dpu.d4x,即一个大的资源规格可以被拆分为多个小的资源规格。
推理性能白皮书 本文提供Fabric推理服务使用性能测试平台进行性能测试的方法和测试数据报告。 测试环境 局点:华为云-Fabric测试环境。 测试时间:2024年11月30日。 推理服务及其相关资源列表: 推理服务名称 使用模型类型 资源规格 算力数量(MU) 实例数量 LLama-3-8B
升级Ray服务 前提条件 已有可正常使用的华为云账号。具体操作,请参见创建IAM用户并授权使用Fabric和配置Fabric服务委托权限。 已有至少一个正常可用的工作空间。具体操作,请参见创建工作空间。 已购买相应的Ray资源。具体操作,请参见购买Ray资源。 已创建升级Ray服
推理性能。 在Fabric上使用全托管Ray服务进行小模型推理时,您只需要将您的小模型推理过程定义为Ray可执行的任务,同时在Fabric中创建推理Job并运行,即可开启推理任务。 前提条件 已创建可用的OBS桶。如果未创建,请参考创建OBS桶。 已创建Fabric worksp
已有可正常使用的华为云账号。具体操作,请参见创建IAM用户并授权使用Fabric和配置Fabric服务委托权限。 已有至少一个正常可用的工作空间。具体操作,请参见创建工作空间。 已有至少一个Ray服务。具体操作,请参见创建Ray服务。 运行推理服务 登录Fabric工作空间管理台。 选择已创建的工作空间,单击“进入工作空间”,选择“开发与生产
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET https://localhost.com/v1/{project_id}/fabric-workspace/tags 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 参数解释:项目ID。获取方法,请参见获取项目ID。
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST https://localhost.com/v1/{project_id}/fabric-workspace/{workspace_id}/tags/create 表1 路径参数 参数 是否必选 参数类型 描述 project_id
如果您需要对您所拥有的Fabric进行精细的权限管理,您可以使用统一身份认证服务(Identity and Access Management,简称IAM),如果华为云账号已经能满足您的要求,不需要创建独立的IAM用户,您可以跳过本章节,不影响您使用Fabric服务的其它功能。 默
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST https://localhost.com/v1/{project_id}/fabric-workspace/resource-instances/filter 表1 路径参数 参数 是否必选 参数类型 描述 project_id
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST https://localhost.com/v1/{project_id}/fabric-workspace/resource-instances/count 表1 路径参数 参数 是否必选 参数类型 描述 project_id
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET https://localhost.com/v1/{project_id}/fabric-workspace/{workspace_id}/tags 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是
Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST https://localhost.com/v1/{project_id}/fabric-workspace/{workspace_id}/tags/delete 表1 路径参数 参数 是否必选 参数类型 描述 project_id
您即将访问非华为云网站,请注意账号财产安全