检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置参数 参数入口： 在Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。
注意事项 NA 示例 CREATE TABLE ctas_select_parquet STORED AS carbondata as select * from parquet_ctas_test; 系统响应 该命令会从Parquet表上创建一个Carbon表，同时导入所有Parquet
productNameIndexTable on table productdb.productSalesTable (productName,city) as 'carbondata' ; SHOW INDEXES ON productdb.productSalesTable; 系统响应
命令中如果携带认证密码信息可能存在安全风险，在执行命令前建议关闭系统的history命令记录功能，避免信息泄露。
db_hive.student limit 1000"| tr "\t" "," > /data/bigdata/hive/student.csv; 导入到ClickHouse的default数据库中的student_hive表中，命令中如果携带认证密码信息可能存在安全风险，在执行命令前建议关闭系统的
9002 --password xxx -m --query='INSERT INTO default.student_hive FORMAT CSV' < /data/bigdata/hive/student.csv 命令中如果携带认证密码信息可能存在安全风险，在执行命令前建议关闭系统的
hdfsDisconnect(fs); 准备运行环境 在节点上安装客户端，例如安装到“/opt/client”目录，安装方法可参考《MapReduce服务用户指南》的“客户端管理”章节。 确认服务端HDFS组件已经安装，并正常运行。
HDFS常见问题 执行distcp命令报错如何处理 HDFS执行Balance时被异常停止如何处理 访问HDFS WebUI时，界面提示无法显示此页 HDFS WebUI无法正常刷新损坏数据的信息 NameNode节点长时间满负载导致客户端无响应 为什么主NameNode重启后系统出现双备现象
Hive表（除EXTERNAL表外）执行drop操作时，会尝试删除该表对应的HDFS数据目录，如果目录删除失败，系统会提示表删除失败。 如果确实需要删除该表，可手动删除涉及到该表的所有备份任务。 父主题： Hive常见问题
示例 ALTER TABLE carbon RENAME TO carbondata; ALTER TABLE test_db.carbon RENAME TO test_db.carbondata; 系统响应 CarbonData库中的文件夹将显示新表名称，可以通过运行SHOW
系统响应 可在driver日志和客户端中查看命令运行成功或失败。 父主题： Hudi DML语法说明
obs-connector 表1 obs-connector数据源连接属性 参数 说明 桶名 保存源数据的OBS文件系统。 源目录或文件 源数据实际存储的形态，可能是文件系统包含一个目录中的全部数据文件，或者是文件系统包含的单个数据文件。
对系统的影响 无。 可能原因 提交的YARN作业程序有问题，例如： spark提交任务参数错误导致。 处理步骤 查看运行失败的作业日志，找到作业失败的具体原因，然后修改并重新提交作业。 参考信息 无。 父主题： MRS集群告警处理参考
参数配置 登录FusionInsight Manager系统。 详细操作请参考访问集群Manager。
对系统的影响 无。 可能原因 Hive SQL语法有问题，导致Hive SQL执行失败。 处理步骤 查看运行失败的Hive SQL，修改为正确语法后再执行。 参考信息 无。 父主题： MRS集群告警处理参考
本示例提供了基于C语言的HDFS文件系统连接、文件操作如创建文件、读写文件、追加文件、删除文件等。相关业务场景介绍请参见HDFS C API接口介绍。 父主题： HDFS开发指南（安全模式）
本示例提供了基于C语言的HDFS文件系统连接、文件操作如创建文件、读写文件、追加文件、删除文件等。相关业务场景介绍请参见HDFS C API接口介绍。 父主题： HDFS开发指南（普通模式）
在未启用Kerberos认证的集群中使用HCatalog客户端，系统将以当前登录操作系统用户来执行DDL命令。 常用的Hive Beeline客户端命令如下表所示。
cd/opt/hadoopclient kinit<用于认证的业务用户> 在Linux系统HDFS客户端使用命令hadoop fs -mkdir /tmp/input（hdfs dfs命令有同样的作用），创建对应目录。
cd/opt/hadoopclient kinit<用于认证的业务用户> 在Linux系统HDFS客户端使用命令hadoop fs -mkdir /tmp/input（hdfs dfs命令有同样的作用），创建对应目录。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
