检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
obs_bucket_name=OBS_BUCKET_NAME, # obs的桶名字 obs_server=OBS_SERVER, # obs访问地址,详情请参见终端节点(Endpoint)和访问域名 verify=VERIFY, # bool类型,是否校验服务端SSL证书 ) t = con
什么是DataArts Fabric DataArts Fabric(简称DataArtsFabric)是华为云提供的数据+AI一站式开发平台,提供从数据处理、分析到模型微调、推理、部署上线的全生命周期管理能力,让数据工程师、数据科学家、AI应用开发工程师等多角色使用自己最熟悉的
&catalog_name=<your_catalog_name> &verify=<your_verify> &timeout=<your_timeout> &proxies=<your_proxies> &obs_server=<your_obs_server> &obs_bucket_name=<your_obs_bucket_name>
SDK概述 数智融合服务软件开发工具包(DataArts Fabric SDK,DataArts Fabric Software Development Kit)是对DataArtsFabric服务提供的REST API进行的封装,以简化用户的开发工作。用户直接调用DataArtsFabric
API概览 通过使用Fabric服务所提供的接口,您可以完整的使用Fabric服务的基本功能。Fabric服务提供的具体API如表1所示。 表1 Fabric服务API概览 类型 子类型 说明 Fabric-admin 服务健康检查 服务健康检查。 用户协议管理 用户协议管理。 委托管理
在处理ORC、PARQUET表数据时,建议使用INSERT OVERWRITE语法。例如: 当向非分区表中插入数据时,建议使用:INSERT OVERWRITE INTO tablename select_clause; 当向分区表中插入数据时,建议使用:INSERT OVERWRITE INTO tablename
exception occurred" } 状态码:500 InternalServerError { "error_code" : "common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 OK 400 BadRequest
udf_main.py ├── register.py ├── serialize.py └── other/ └── util.py 代码示例如下: # udf_main.py包含了UDF的主函数,即Handler from other.util import printLog
JDBC提供了三个方法,用于创建数据库连接。 DriverManager.getConnection(String url); DriverManager.getConnection(String url, Properties info); DriverManager.getConnection(String
Frame表达式多次调用,示例如下: import ibis import ibis_fabric as fabric from ibis_fabric.udf import RegisterType def transform_json(ts: float, msg: str)
count_order FROM lineitem WHERE l_shipdate <= CAST('1998-09-02' AS date) GROUP BY l_returnflag, l_linestatus ORDER BY l_returnflag
ibis_fabric as fabric from ibis_fabric.udf import RegisterType def calculate_product(price: float, quantity: int) -> float: return price
import ibis_fabric as fabric from ibis_fabric.udf import RegisterType # 隐式注册UDF @fabric.udf.python(database="your-database", register_type=RegisterType
用户必须先获得Backend(Fabric)连接,才能调用Backend UDF Registery API。 对于负责类型的支持依赖fabric内核对复杂类型的支持。 在注册和使用分离的场景下,对于UDF的使用者,允许用户通过Fabric Backend提供的Backend
以并行文件系统为例: 选择“并行文件系统 > 创建并行文件系统”,进入创建页面,配置相关参数后单击“立即创建”。 文件系统名称:根据界面要求设置并行文件系统名称,例如“fabric-serverless”。 其他参数根据实际情况选择。 在并行文件系统页面,单击已创建的文件系统名称,例
exception occurred" } 状态码:500 InternalServerError { "error_code" : "common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 查询委托响应体。
创建Ray集群的worker group规格,可创建多个worker group。 从资源规格列表中选择一个规格部署Worker节点,同时配置worker节点的数量上/下限,worker节点下限至少需要填1,上限请根据业务压力填写。Ray集群初始化创建下限数量的worker规格,根据负载压
PG_OPERATOR PG_OPERATOR系统表存储有关操作符的信息。 表1 PG_OPERATOR字段 名字 类型 引用 描述 oid oid - 行标识符(隐藏属性,必须明确选择才会显示)。 oprname name - 操作符的名称。 oprnamespace oid PG_NAMESPACE
PG_FOREIGN_SERVER PG_FOREIGN_SERVER系统表存储外部服务器定义。一个外部服务器描述了一个外部数据源,例如一个远程服务器。外部服务器通过外部数据封装器访问。 表1 PG_FOREIGN_SERVER字段 名字 类型 引用 描述 oid oid - 行
Time-out { "error_code" : "common.00000408", "error_msg" : "timeout exception occurred" } 状态码:500 InternalServerError { "error_code" : "common