检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
删除SQL端点 登录华为云DataArtsFabric控制台,选择进入工作空间。 左侧选择“资源与资产 > SQL端点”。 单击端点卡片右上角删除按钮并确认,完成我的端点删除。 父主题: 管理SQL端点
关闭连接 在使用数据库连接完成相应的数据操作后,需要关闭数据库连接。 关闭数据库连接可以直接调用其close方法即可。 如:conn.close() 父主题: 基于JDBC开发
SQL查询执行流程 SQL引擎从接收SQL语句到执行SQL语句需要经历的步骤如图1和表1所示。其中,红色字体部分为DBA可以介入实施调优的环节。 图1 SQL引擎执行查询类SQL语句的流程 表1 SQL引擎执行查询类SQL语句的步骤说明 步骤 说明 1、语法&词法解析 按照约定的
vpc_id String 参数解释:服务接入客户端的vpcID。 约束限制:不涉及。 取值范围:长度为[1,64]的英文字符、数字和中划线(-)的组合。 默认取值:不涉及。 subnet_ids Array of strings 参数解释:服务接入客户端的子网ID,多个子网用“,”连接。
查询消息通知策略列表 功能介绍 查询消息通知策略。用户通过调用该接口查询已创建的消息通知策略。支持分页查询,根据传入的工作空间ID,消息匹配样式来查询。此接口为同步接口,无配套使用接口和特殊场景。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Ex
更新vpcep客户端 功能介绍 更新接入客户端。用户可以修改接入客户端的名字。此接口为同步接口,无配套使用接口和特殊场景。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI
UDF配置函数 update_udf_runtime_config 描述:用户可以执行内置函数指定某些UDF对应的Python UDF actor配置参数,或者指定所有UDF执行时的配置参数,包括actor使用的CPU核数,内存占用量和并行度。 语法: 1 update_udf_
特定需求自定义的函数,用于扩展数据库或数据处理系统的功能。UDF可以执行各种操作,如数据转换、复杂计算、数据聚合等,这些操作可能超出了系统提供的内置函数的能力。 UDF的主要用途包括: 扩展功能:UDF允许用户扩展数据库或数据处理系统的功能,执行内置函数不支持的操作。 复杂计算:
创建SQL端点 在使用DataArtsFabric SQL服务的时候除了使用公共端点,用户也可以自己创建端点。这些端点是属于用户个人,其他用户不可见。 登录华为云DataArtsFabric控制台,选择进入工作空间。 左侧选择“资源与资产 > SQL端点”。 单击“创建端点”",
创建、清空、删除Iceberg表 Iceberg表将数据存储在OBS上。DataArtsFabric SQL可以直接访问OBS上的Iceberg数据。 创建Iceberg表 通过CREATE TABLE语法创建Iceberg表。与其他格式的表相比,创建Iceberg表没有特别的参数需要指定,只需要指定STORE
加载驱动 在创建数据库连接之前,需要先加载数据库驱动程序。 加载驱动有两种方法: 在代码中创建连接之前任意位置隐含装载:Class.forName("org.postgresql.Driver"); 在JVM启动时参数传递:java -Djdbc.drivers=org.postgresql
执行计划算子 算子介绍 SQL执行计划中每一个步骤为一个数据库运算符,也叫做一个执行算子。DataArtsFabric SQL中算子是基本的数据处理单元,合理地组合算子、优化算子的顺序和执行方式,可以提升数据的处理效率。 DataArtsFabric SQL算子可分为:扫描算子、
子查询调优 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 DataArtsFabric
使用Plan Hint进行调优 Plan Hint调优概述 Join顺序的Hint Join方式的Hint 行数的Hint Stream方式的Hint 子链接块名的hint 指定子查询不提升的hint 配置参数的hint Hint的错误、冲突及告警 父主题: SQL调优
场景实践 不带UDF的DF示例 带Scalar UDF的DF示例 直接使用带Scalar UDF的DF示例 父主题: DataArtsFabric DataFrame
删除vpcep客户端 功能介绍 删除接入客户端。用户可以删除不再使用的接入端。此接口为同步接口,无配套使用接口和特殊场景。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI
e为匹配的值。 约束限制:[1,10]。 sys_tags 否 Array of SystemTagParam objects 参数解释:系统标签列表,目前只包含一个tag结构体。key下面只包含一个value。 约束限制:1。 表5 ResourceTagParam 参数 是否必选
获取Statement结果、执行状态 功能介绍 查询SQL语句执行结果。用户可通过该接口查询SQL语句执行结果,输入为端点id、SQL Session id、语句id,返回执行结果。此接口为同步接口,无配套使用接口和特殊场景。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API
查询和写入Iceberg表 查询Iceberg 可以查询Iceberg表中的数据。具体语法可参考SELECT。 注意事项: 当前仅支持查询最新全量数据。 示例: 1 SELECT * FROM iceberg_ext order by col1; 写入Iceberg表 可以向I
算子级调优 一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子,然后进行针对性优化。 如下面的执行