检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用DLI Flink作业实时同步MRS Kafka数据至CloudTable HBase集群 本实践演示通过数据湖探索服务DLI Flink作业将分布式消息服务Kafka的消费数据实时同步至CloudTable HBase,实现Kafka实时入库到CloudTable HBase的过程。
使用HBase HBase使用流程 创建HBase集群 连接HBase集群 导入数据至HBase集群 HBase企业级能力增强 管理HBase集群 HBase集群运维
Load是一个异步的导入方式,支持的数据源取决于Broker进程支持的数据源。本文为您介绍Broker Load导入的基本原理、基本操作、系统配置以及最佳实践。 适用场景 源数据在Broker可以访问的存储系统中,如HDFS、OBS。 数据量在几十到百GB级别。 基本原理 用户在提交导入任务后,FE会生成对应的P
请及时充值确保集群可正常使用。 如果集群状态亚健康,也会限制该功能不可用,请及时联系技术工程师处理使集群可正常使用。 对系统的影响 重启期间集群将无法提供服务。因此,在重启前,请确定集群中没有正在运行的任务,并且所有数据都已经保存。 如果集群正在处理业务数据,如导入数据、查询数据
请及时充值确保集群可正常使用。 如果集群状态亚健康,也会限制该功能不可用,请及时联系技术工程师处理使集群可正常使用。 对系统的影响 重启期间集群将无法提供服务。因此,在重启前,请确定集群中没有正在运行的任务,并且所有数据都已经保存。 如果集群正在处理业务数据,如导入数据、查询数据
网络配置 对接ELB访问CloudTable Doris集群 对接ELB访问CloudTable ClickHouse集群
计费模式 计费模式概述 包年/包月 按需计费
计费FAQ 创建集群时,为什么购买按钮一直处于灰色,无法提交? 集群被冻结,导致无法使用,如何解冻? 云服务资源冻结的原因?
网络配置 CloudTable集群支持跨VPC/公网访问的使用场景
数据读写类 CloudTable HBase存储的是原始数据吗? 为什么HBase无法写入数据? HBase集群写入数据大小不能超过多少? HBase表每日存储的新增数据量怎么查看? 怎么查看catalog指定数据库下的列表? 访问CloudTable HBase集群报错,hmaster域名不识别?
使用Doris Doris使用流程 创建Doris集群 连接Doris集群 配置Doris用户权限 Doris企业级能力增强 管理Doris集群 Doris集群运维
使用StarRocks StarRocks使用流程 创建StarRocks存算一体集群 连接StarRocks集群 管理StarRocks集群 StarRocks集群运维
使用一键部署客户端工具,建议Linux弹性云服务器的操作系统类型为EulerOS,CentOS,Ubuntu和SUSE。具体操作请参见准备弹性云服务器。 下载客户端一键部署工具。 使用SSH登录工具(如PuTTY)通过“弹性IP”远程登录到Linux弹性云服务器,然后执行如下命令,获取客户端一键部署工具:
扩容。一般情况下,可以通过将FE扩展至3个以上实现FE的高可用,且FE节点的扩容过程,不影响当前系统运行。BE节点的扩容过程,不影响当前系统运行以及正在执行的任务,并且不会影响当前系统的性能,数据均衡会自动进行,集群会在几个小时到一天不等的时间内恢复到负载均衡的状态。Doris集
右侧代码示例栏会自动拼装参数到代码中供您进行使用。 图2 设置输入参数 在场景示例中可查看本服务更详细的场景SDK使用方法。 图3 场景示例 SDK列表 表1提供了CloudTable服务支持的SDK列表,您可以在GitHub仓库查看SDK更新历史、获取安装包以及查看指导文档。 表1
计费项 CloudTable由HBase、Doris、ClickHouse组件构成,具体计费由以下表格说明。 计费说明 表格存储服务器的计费项由集群规格费用组成。HBase、Doris、ClickHouse计费项 表1 计费项 计费项 计费项说明 适用的计费模式 计费公式 计算规格
+--v-----------+ | | FE | 5. Return result to user | +--+-----------+ |
费周期。计费的起点以CloudTable集群创建成功的时间点为准,终点以实例删除时间为准。 云服务器从创建到启动需要一定时长,计费的起点是创建成功的时间点,而非创建时间。您可以在云服务器详情页“基本信息”页签查看这两个时间,创建成功的时间点对应界面上的“启动时间”。 例如,您在8
在网站、App和游戏中,对用户的点击、浏览时长等使用数据进行收集,导入到云数据仓库ClickHouse中,构建用户特征分析大宽表。利用云ClickHouse的优异查询性能,分析系统进行多维度、多模式分析时,可以在亚秒级内响应,快速分析出用户行为特征和规律,为精准营销和会员转化等业务提供有效支持。 企业经营分析。 在企
数据导入 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable HBase集群 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable ClickHouse集群