检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
e为匹配的值。 约束限制:[1,10]。 sys_tags 否 Array of SystemTagParam objects 参数解释:系统标签列表,目前只包含一个tag结构体。key下面只包含一个value。 约束限制:1。 表5 ResourceTagParam 参数 是否必选
删除vpcep客户端 功能介绍 删除接入客户端。用户可以删除不再使用的接入端。此接口为同步接口,无配套使用接口和特殊场景。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI
查询和写入Iceberg表 查询Iceberg 可以查询Iceberg表中的数据。具体语法可参考SELECT。 注意事项: 当前仅支持查询最新全量数据。 示例: 1 SELECT * FROM iceberg_ext order by col1; 写入Iceberg表 可以向I
算子级调优 一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子,然后进行针对性优化。 如下面的执行
二进制类型 DataArtsFabric SQL支持的二进制类型请参见表1。 表1 二进制类型 名称 描述 存储空间 BYTEA 变长的二进制字符串 4字节加上实际的二进制字符串。最大为1G-8203B(即1073733621B)。 除了每列的大小限制以外,每个元组的总大小也不可超过1G-8203字节。
n类型除外)。 如果输入类型是同一个类型范畴,则选择该类型范畴的首选类型(union操作会选择第一个分支的类型作为所选类型的情况除外)。 系统表pg_type中typcategory表示数据类型范畴, typispreferred表示是否是typcategory分类中的首选类型。
UDF运行时单个actor的资源规格,例如dpu=1,表示规格为1U4G,其取值可以是介于0.33到1.0之间的分数值,也可以是1到32间的整数值,需要注意的是,系统会将输入值四舍五入,保留两位小数。 1 父主题: UDF开发(Python)
fabric.connect( # 调用Fabric后端连接,创建连接 endpoint=FABRIC_ENDPOINT, # 指定服务的区域,区域查询请参见地区和终端节点 endpoint_id=FABRIC_ENDPOINT_ID, # 查询endpoint_id
创建SQL端点 在使用DataArtsFabric SQL服务的时候除了使用公共端点,用户也可以自己创建端点。这些端点是属于用户个人,其他用户不可见。 登录华为云DataArtsFabric控制台,选择进入工作空间。 左侧选择“资源与资产 > SQL端点”。 单击“创建端点”",
场景实践 不带UDF的DF示例 带Scalar UDF的DF示例 直接使用带Scalar UDF的DF示例 父主题: DataArtsFabric DataFrame
创建、清空、删除Iceberg表 Iceberg表将数据存储在OBS上。DataArtsFabric SQL可以直接访问OBS上的Iceberg数据。 创建Iceberg表 通过CREATE TABLE语法创建Iceberg表。与其他格式的表相比,创建Iceberg表没有特别的参数需要指定,只需要指定STORE
加载驱动 在创建数据库连接之前,需要先加载数据库驱动程序。 加载驱动有两种方法: 在代码中创建连接之前任意位置隐含装载:Class.forName("org.postgresql.Driver"); 在JVM启动时参数传递:java -Djdbc.drivers=org.postgresql
执行计划算子 算子介绍 SQL执行计划中每一个步骤为一个数据库运算符,也叫做一个执行算子。DataArtsFabric SQL中算子是基本的数据处理单元,合理地组合算子、优化算子的顺序和执行方式,可以提升数据的处理效率。 DataArtsFabric SQL算子可分为:扫描算子、
子查询调优 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 DataArtsFabric
使用Plan Hint进行调优 Plan Hint调优概述 Join顺序的Hint Join方式的Hint 行数的Hint Stream方式的Hint 子链接块名的hint 指定子查询不提升的hint 配置参数的hint Hint的错误、冲突及告警 父主题: SQL调优
修改SQL端点 在使用DataArtsFabric SQL服务的时候,用户可以修改自己创建的端点。 登录华为云DataArtsFabric控制台,选择进入工作空间。 左侧选择“资源与资产 > SQL端点”。 单击端点卡片,进入端点详情,单击“编辑SQL端点”,修改内容后保存。 父主题:
删除SQL端点 登录华为云DataArtsFabric控制台,选择进入工作空间。 左侧选择“资源与资产 > SQL端点”。 单击端点卡片右上角删除按钮并确认,完成我的端点删除。 父主题: 管理SQL端点
关闭连接 在使用数据库连接完成相应的数据操作后,需要关闭数据库连接。 关闭数据库连接可以直接调用其close方法即可。 如:conn.close() 父主题: 基于JDBC开发
SQL查询执行流程 SQL引擎从接收SQL语句到执行SQL语句需要经历的步骤如图1和表1所示。其中,红色字体部分为DBA可以介入实施调优的环节。 图1 SQL引擎执行查询类SQL语句的流程 表1 SQL引擎执行查询类SQL语句的步骤说明 步骤 说明 1、语法&词法解析 按照约定的
UDF配置函数 update_udf_runtime_config 描述:用户可以执行内置函数指定某些UDF对应的Python UDF actor配置参数,或者指定所有UDF执行时的配置参数,包括actor使用的CPU核数,内存占用量和并行度。 语法: 1 update_udf_