检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Spark应用可能连接运行在NodeManager进程中的长时间运行的辅助服务,用于提高shuffle的性能。 true:启用External Shuffle Service。 false:关闭External Shuffle Service true 修改配置后,单击“保存”,根据界面提示操作后,等待配置保存成功。
Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,应用失败 问题 Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,执行应用时显示如下异常。
Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,应用失败 问题 Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,执行应用时显示如下异常。
目的端NameService名称 备集群的NameService名称。 可以输入集群内置的远端集群的NameService名称(haclusterX,haclusterX1,haclusterX2,haclusterX3,haclusterX4)。 也可以输入其他已配置的远端集群NameService名称。
勾选欲分配的RegionServer实例,单击“下一步”。 一次分配操作仅允许勾选来自同一RSGroup的一个到多个RegionServer实例,且default组中的RegionServer的运行状态不为良好时不允许被勾选分配。若想要分配来自不同RSGroup的RegionServer实例,请分多次修改操作进行分配。
勾选欲分配的RegionServer实例,单击“下一步”。 一次分配操作仅允许勾选来自同一RSGroup的一个到多个RegionServer实例,且default组中的RegionServer的运行状态不为良好时不允许被勾选分配。如果想要分配来自不同RSGroup的RegionServer实例,请分多次修改操作进行分配。
clusterX,haclusterX1,haclusterX2,haclusterX3,haclusterX4;也可输入其他已配置的远端集群NameService名称。 IP 模式 目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。 源端NameNode
Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,应用失败 问题 Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,执行应用时显示如下异常。
产生告警的主机名。 对系统的影响 依赖LdapServer的组件运行状态变为故障,可能引起集群Kerberos认证失败或操作系统用户缓存同步异常,进而导致组件业务运行异常。 可能原因 LdapServer服务所在节点故障。 LdapServer进程故障。 处理步骤 检查LdapServer服务的
Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,应用失败 问题 Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,执行应用时显示如下异常。
和用户体验。 Manager关键特性:单点登录 提供Manager WebUI与组件WebUI之间的单点登录,以及MRS与第三方系统集成时的单点登录。 此功能统一了Manager系统用户和组件用户的管理及认证。整个系统使用LDAP管理用户,使用Kerberos进行认证,并在OMS
Manager登录认证 功能介绍 实现Basic认证登录,并返回登录后的httpClient。 前提条件 配置用户的集群信息和登录账号信息: 配置文件:“样例工程文件夹\conf\UserInfo.properties”。 参数说明: userName:登录Manager系统的用户名。
'SASL_PLAINTEXT', --FlinkServer所在集群为非安全模式去掉此参数 'properties.kerberos.domain.name' = 'hadoop.系统域名' --FlinkServer所在集群为非安全模式去掉此参数 ); Insert into dws_test
IOException: Len error 45 at org.apache.zookeeper.server.NettyServerCnxn.receiveMessage(NettyServerCnxn.java:438) at org.apache.zookeeper.server.NettyS
IOException: Len error 45 at org.apache.zookeeper.server.NettyServerCnxn.receiveMessage(NettyServerCnxn.java:438) at org.apache.zookeeper.server.NettyS
ALM-12005 OKerberos资源异常 告警解释 告警模块对Manager中的Kerberos资源的状态按80秒周期进行监控,当连续6次监控到Kerberos资源异常时,系统产生此告警。 当Kerberos资源恢复时,且告警处理完成时,告警恢复。 MRS 3.3.1及之后
可以在Manager界面中配置。 表1 ZooKeeper日志列表 日志类型 日志文件名 描述 运行日志 zookeeper-<SSH_USER>-<process_name>-<hostname>.log ZooKeeper系统日志,记录ZooKeeper系统运行时候所产生的大部分日志。
ALM-25500 KrbServer服务不可用 告警解释 系统按30秒周期性检测组件KrbServer的服务状态。当检测到组件KrbServer服务异常时产生该告警。 当检测到组件KrbServer服务恢复时告警恢复。 告警属性 告警ID 告警级别 是否自动清除 25500 紧急
ALM-45481 KuduTserver存在容量已满磁盘 告警解释 系统每60秒周期性检测Kudu的磁盘监控指标,当检测到某个Tserver的容量已满磁盘数量监控指标不为0时,产生该告警。 当Tserver的容量已满磁盘数量监控指标重新变为0后,该告警自动消除。 告警属性 告警ID
可以在Manager界面中配置。 表1 ZooKeeper日志列表 日志类型 日志文件名 描述 运行日志 zookeeper-<SSH_USER>-<process_name>-<hostname>.log ZooKeeper系统日志,记录ZooKeeper系统运行时候所产生的大部分日志。