检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
策略授权参考 本章节介绍Fabric策略授权场景下支持的策略授权项。 支持的授权项 策略包含系统策略和自定义策略,如果系统策略不满足授权要求,管理员可以创建自定义策略,并通过给用户组授予自定义策略来进行精细的访问控制。策略支持的操作与API相对应,授权项列表说明如下: 权限:允许或拒绝某项操作。
特定需求自定义的函数,用于扩展数据库或数据处理系统的功能。UDF可以执行各种操作,如数据转换、复杂计算、数据聚合等,这些操作可能超出了系统提供的内置函数的能力。 UDF的主要用途包括: 扩展功能:UDF允许用户扩展数据库或数据处理系统的功能,执行内置函数不支持的操作。 复杂计算:
创建模型 在DataArtsFabric部署推理服务的时候除了使用公共模型,用户也可以自己创建模型。用户可以在DataArtsFabric模型页面创建模型,这些模型是属于用户个人,其他用户不可见。 约束与限制 创建模型的通用约束如下: 需要是DataArtsFabric支持的基模型,否则不支持,基模型列表如下:
您也可以删除不想要的模型版本。 单击页面操作列的“删除”按钮,再次确认后进行删除。 图6 删除模型入口 图7 删除模型 父主题: 创建我的推理服务进行推理
台机器上扩展其应用的研究人员和工程师来说,是一个强有力的工具。同时,Ray生态系统还包括一些高级库,例如Ray Tune(用于超参数调整)、RLlib(用于强化学习)、Ray Serve(用于模型服务)等,以满足不同场景下的需求。 应用场景 Ray作为一个分布式机器学习计算框架,
'0_msg': return json.dumps({"time_stamp": 0.0, "msg": {}}) else: d = dict_to_object(json.loads(msg)) return json.dumps({"time_stamp":
数据库提供了许多运行参数,配置这些参数可以影响数据库系统的行为。在修改这些参数时请确保已了解对应参数对数据库的影响,否则可能会导致无法预料的结果。 注意事项 参数中如果取值范围为字符串,此字符串应遵循操作系统的路径和文件名命名规则。 取值范围最大值为INT_MAX的参数,此选项最大值跟所在的操作系统有关。 取值范围
None fn 指定UDF原始的Python函数 Callable None signature(目前不可用) 指定UDF函数签名和返回值类型 ibis.common.annotations.Signature | None None replace(目前不可用) 指定UDF是否支持就地修改
def pysum(arg1: int, arg2: int) -> int: printLog(arg1, arg2) return np.sum(np.array([arg1, arg2])) # util.py是函数的依赖文件 def printLog(a,b):
分析trace文件,需要使用jeprof工具,该工具由Jemalloc生成。在常规使用中,需要依赖perl环境,如果需要生成pdf调用图,需要安装与操作系统匹配的GraphViz工具。 示例 使用gov_client -j重新启动数据库。 在数据库运行期间,打开内存trace记录功能: 1 SELECT
选择“资源与资产->推理端点”。 单击想要删除的推理端点右上角的垃圾桶标记,确认后删除推理端点。 图1 推理端点 父主题: 创建我的推理服务进行推理
Hadoop Catalog Hadoop Catalog不依赖外部系统,可以使用任意文件系统,它将当前表元数据文件路径记录在一个文件目录下。 因为Hadoop支持存算分离,底层的数据文件可以是HDFS或者是OBS对象系统等。 对Hadoop Catalog来讲,定位一个表的位置,只需
文本检索函数和操作符 HLL函数和操作符 返回集合的函数 几何函数和操作符 网络地址函数和操作符 系统信息函数 系统管理函数 数据库对象函数 统计信息函数 XML函数 漏斗和留存函数 ICEBERG表服务函数 UDF配置函数 父主题: SQL语法参考
API概览 通过使用Fabric服务所提供的接口,您可以完整的使用Fabric服务的基本功能。Fabric服务提供的具体API如表1所示。 表1 Fabric服务API概览 类型 子类型 说明 Fabric-admin 服务健康检查 服务健康检查。 用户协议管理 用户协议管理。 委托管理
_name: 遍历目标列 遍历merge语句的源表中的目标列 遍历merge语句中的action(update/insert) 遍历returning子句 遍历from中的join条件和where条件(join条件优先于where条件) 如果是集合操作,遍历集合的各个分支(uni
当前DataArtsFabric提供以下两种方式进行推理: 用公共推理服务进行推理:DataArtsFabric提供基于开源大语言模型(Qwen2、GLM4等)的公共推理服务,用户可以在推理端点查看公共端点,选择自己想用的端点进行开通,然后就可以在试验场使用公共推理服务。该方式无需部署,开通后即可使用常见的开源大模型进行推理。
DataArtsFabric SQL通过OBS服务实现数据存储,需要先在OBS控制台进行桶及文件夹创建,并导入样例数据。 登录管理控制台。 在页面左上角单击图标,选择“存储 > 对象存储服务”,进入对象存储服务页面。 以并行文件系统为例: 选择“并行文件系统 > 创建并行文件系统”,进入创建页面,配置相关参数后单击“立即创建”。
附录 状态码 错误码 获取项目ID 获取账号ID 获取工作空间ID 获取端点ID 获取模型ID 获取推理服务实例ID 获取企业项目ID
创建Ray集群 Ray是一款高性能分布式执行框架,它使用了和传统分布式计算系统不一样的架构,提供了分布式计算的抽象方式。 Ray集群采用全托管独享模式,用户无需关心后台的资源管理,提供基于Ray的分布式作业执行能力,完全兼容开源版本,用户无需对脚本进行复杂的适配就可以使用,并且开
在查看账单后,如果您需要对某些资源停止计费可参考以下步骤: 在账单中获取资源ID或资源名称等其他资源信息。 根据上一步的信息,在云服务的控制台找到云服务资源。 将资源停止计费。 具体操作如下: RAY资源:停止RAY资源的计费,需要删除/退订RAY资源,删除后可能导致已有的RAY集群不可用。