检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
API概览 通过使用Fabric服务所提供的接口,您可以完整的使用Fabric服务的基本功能。Fabric服务提供的具体API如表1所示。 表1 Fabric服务API概览 类型 子类型 说明 Fabric-admin 服务健康检查 服务健康检查。 用户协议管理 用户协议管理。 委托管理
ALTER TABLE 功能描述 ALTER TABLE为Fabric SQL服务下特有语法,该语法功能是修改LakeFormation上表的元数据信息。 注意事项 ADD COLUMNS、DROP COLUMNS、COLUMN RENAME、ALTER COLUMN语法仅对IC
入门实践 使用Fabric SQL并实现数据导入和查询 父主题: Fabric SQL
入 Iceberg 表的关键组件。 当前Fabric SQL版本支持使用Hadoop Catalog作为Iceberg表的Catalog组件。 Hadoop Catalog Hadoop Catalog不依赖外部系统,可以使用任意文件系统,它将当前表元数据文件路径记录在一个文件目录下。
PG_FOREIGN_DATA_WRAPPER PG_FOREIGN_DATA_WRAPPER系统表存储外部数据封装器定义。一个外部数据封装器是在外部服务器上驻留外部数据的机制,是可以访问的。 表1 PG_FOREIGN_DATA_WRAPPER字段 名字 类型 引用 描述 oid
查询表的属性。 1 DESCRIBE web_returns_p1; 执行如下命令查询表web_returns_p1的数据量。 1 SELECT count(*) FROM web_returns_p1; 执行如下命令查询表web_returns_p1的所有数据。 1 SELECT *
CREATE EXTERNAL TABLE 功能描述 CREATE EXTERNAL TABLE为Fabric SQL服务下特有语法,该语法功能是在LakeFormation上创建指定名称的表。 注意事项 PARTITIONED BY中出现的列不能出现在表的普通列描述中,分区列始终排在普通列的后面。
Fabric SQL计费项 Fabric SQL服务根据业务场景实际使用的资源进行计费。详细的计费项及说明请参考表1 SQL计费项信息。 表1 SQL计费项信息 计费项 计费说明 SQL预热资源 此处根据您创建的SQL端点的预热资源的运行时长进行收费,按需付费,按照SQL端点实际
修改Iceberg表 目前支持对Iceberg表做以下操作:添加列,修改列,删除列,修改表属性,恢复表属性默认值对表中的列,表的属性进行修改,具体语法可参考ALTER TABLE。 修改表中的列 通过ALTER TABLE语法的ADD COLUMNS, COLUMN RENAME
推理性能白皮书 本文提供Fabric推理服务使用性能测试平台进行性能测试的方法和测试数据报告。 测试环境 局点:华为云-Fabric测试环境。 测试时间:2024年11月30日。 推理服务及其相关资源列表: 推理服务名称 使用模型类型 资源规格 算力数量(MU) 实例数量 LLama-3-8B
在SQL语言中,每个数据都与一个决定其行为和用法的数据类型相关。Fabric SQL提供一个可扩展的数据类型系统,该系统比其它SQL实现更具通用性和灵活性。因而,Fabric SQL中大多数类型转换是由通用规则来管理的,这种做法允许使用混合类型的表达式。 Fabric SQL扫描/分析器只将词法元素分解成
Schema Database Fabric SQL中的Schema对应了LakeFormation的Database。 Table Table Fabric SQL和LakeFormation的表级映射关系是一致的。 IAM User IAM User Fabric SQL仅支持IAM用户访问,暂不支持其他类型用户访问。
“预热资源数”,选择“启用公共端点”,完成我的端点创建。 如果打开“启用公共端点”,当预热资源不足时,自动调度到公共端点。 父主题: Fabric SQL
创建、清空、删除Iceberg表 外表(EXTERNAL TABLE)是对OBS上数据的映射。Fabric SQL通过外表方式访问OBS上的Iceberg数据。 创建Iceberg External表 通过CREATE EXTERNAL TABLE语法创建Iceberg表。与一般
java.sql.Driver java.sql.Driver是数据库驱动接口。 表1 对java.sql.Driver的支持情况 方法名 返回值类型 支持JDBC 4 acceptsURL(String url) boolean Yes connect(String url, Properties
查询和写入Iceberg表 查询Iceberg表 可以查询Iceberg表中的数据。具体语法可参考SELECT。 注意事项: 当前仅支持查询最新全量数据。 示例: 1 SELECT * FROM iceberg_ext order by col1; 写入Iceberg表 可以向
使用Iceberg前准备 设置GUC 本版本新增GUC参数enable_meta_scan,用于优化查询的性能。 该参数默认打开,但在表数据量很小的情况下,关闭可能比打开的时候查询性能更高,请基于实际情况打开或关闭该GUC。 代码示例如下: 1 2 3 4 5 6 SHOW enable_meta_scan;
数据列名与列类型建表,ICEBERG文件层面数据类型与Fabric数据类型对应关系与需要指定的建表类型如下表所示。 表1 Fabric数据类型与ICEBERG数据类型匹配关系 类型名称 ICEBERG对应数据类型 Fabric对应建表类型 2字节整数 INTEGER INTEGER
如果您需要将Fabric集成到第三方系统,用于二次开发,请使用API方式访问Fabric。具体操作和API详细描述,请参见API参考。 SDK方式 如果您需要将Fabric功能集成到第三方系统,用于二次开发,可选择调用SDK方式完成目的。Fabric的SDK是对Fabric提供的REST API进行的Python/J
以下案例中出现的费用价格仅供参考,实际价格请参见各服务价格详情。 样例1:Fabric服务Ray资源 Ray资源的“按需计费”模式都是秒级计费,Fabric产品价格详情中标出了每小时价格,您可以将每小时价格除以3600,即得到每秒价格。 示例,某一Ray资源按需实例,fabric.ray.dpu.d1x规格价格为0.