检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
(可选)选择“ENV管理 > 新建ENV”,进入“新建ENV”参数配置窗口,参考下表进行参数配置。
/taskmanagers 任务管理员信息。 /taskmanagers/<taskmanagerid>/metrics 任务管理员的度量信息。 /taskmanagers/<taskmanagerid>/log 任务管理员的日志信息。
/taskmanagers 任务管理员信息。 /taskmanagers/<taskmanagerid>/metrics 任务管理员的度量信息。 /taskmanagers/<taskmanagerid>/log 任务管理员的日志信息。
修改Manager页面及认证中心的超时时间 MRS 3.x版本集群(MRS 3.3.0及之后版本): 登录Manager,选择“系统 > OMS”。 在列表中单击“tomcat”所在行的“修改配置”。
Hudi TTL语法说明 Hudi TTL简介 初始化存量表的分区 开启/关闭TTL 管理TTL策略 手动立即执行TTL 父主题: Hudi SQL语法参考
使用Hudi Hudi表概述 使用Spark Shell创建Hudi表 Hudi写操作 Hudi读操作 数据管理维护 Hudi常见配置参数 Hudi性能调优 Hudi常见问题
以root用户登录HDFS客户端,用户密码为安装前用户自定义,请咨询MRS集群管理员。
/taskmanagers 任务管理员信息。 /taskmanagers/<taskmanagerid>/metrics 任务管理员的度量信息。 /taskmanagers/<taskmanagerid>/log 任务管理员的日志信息。
创建OBS并行文件系统并获取AK/SK 创建OBS并行文件系统。 登录OBS管理控制台。 选择“并行文件系统 > 创建并行文件系统”。 填写文件系统名称,例如“doris-obs”。 企业项目需要与MRS集群保持一致,其他参数请根据需要填写。 单击“立即创建”。
Hudi应用开发规范 Hudi开发规范概述 Hudi数据表设计规范 Hudi数据表管理操作规范 Spark on Hudi开发规范 FlinkOnHudi流场景操作指导 SparkOnHudi场景操作指导
Trigger condition 系统当前指标取值满足自定义的告警设置条件。 对系统的影响 用户无法执行新的Storm任务。 可能原因 集群中Supervisor处于异常状态。 集群中Supervisor的状态正常,但是处理能力不足。
联系网络管理员,检查网络是否存在异常。 是,恢复网络故障,执行步骤 5。 否,执行步骤 6。 等待5分钟,检查该告警是否恢复。 是,处理完毕。 否,执行步骤 6。 收集故障信息。 在主集群的FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
以root用户登录告警所在主机,用户密码为安装前用户自定义,请咨询系统管理员。 集群节点登录可参考登录MRS集群节点。 执行命令查看磁盘当前Inode使用率。
以root用户登录主DBService节点,用户密码为安装前用户自定义,请咨询系统管理员。 集群节点登录可参考登录MRS集群节点。 主DBService节点可在集群Manager页面选择“集群 > 服务 > DBService > 实例”查看。
联系网络管理员,检查网络是否存在异常。 是,恢复网络故障,执行步骤 5。 否,执行步骤 6。 等待5分钟,检查该告警是否恢复。 是,处理完毕。 否,执行步骤 6。 收集故障信息。 在主集群的FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
Hive表支持级联授权功能 操作场景 开启级联授权功能的集群极大地提升了鉴权易用性,用户只需在Ranger页面上对业务表进行一次授权,系统就会自动细粒度关联数据存储源的权限,不需要感知表的存储路径,无需进行二次授权。
MRS集群安全配置 集群互信管理 更换MRS集群证书 MRS集群安全加固 修改MRS集群系统用户密码 修改MRS集群数据库用户密码 父主题: MRS集群运维
使用rangeradmin用户登录Ranger管理页面。 在首页中单击“EXTERNAL AUTHORIZATION”区域的组件插件名称“OBS”。
以root用户登录告警所在主机,用户密码为安装前用户自定义,请咨询系统管理员。 执行命令su - omm,切换到omm用户。
创建CDL作业前准备 开启Kafka高可靠功能 登录CDLService WebUI界面 上传数据库驱动文件 创建CDL数据库连接 管理CDL ENV变量 配置源数据心跳表实现数据判齐功能 父主题: 使用CDL