检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
集合中是单个StandElementFieldVO对象 system_default Array of StandElementFieldVO objects 系统默认项,集合中是单个StandElementFieldVO对象 custom Array of StandElementFieldVO objects
String 数据连接类型。 databases String 数据库名,当存在多个值时以逗号分隔。 sql String 自定义规则中的SQL脚本,系统内置规则时返回。 tables String 表名,当存在多个值时以逗号分隔。 reference_tables String 跨字段规则
ON对象或JSON数组。 JSON对象 记录节点 文件类型为JSON对象时支持此参数。 记录数据的根节点。该节点对应的数据为JSON数组,系统会以同一模式从该数组中提取数据。多层嵌套的JSON节点以字符“.”分隔。 data.list 高级属性 使用rfc4180解析器 文件格式为CSV格式时支持此参数。
色所需权限。 创建/编辑角色时,如果您当前账号已具备DAYU Administrator或Tenant Administrator权限,但系统仍然返回报错“您无权限进行该操作”,这可能是由于网络限制导致的,建议您切换到其他网络后重试。 图1 创建自定义角色 自定义角色的角色名称、
全”模块,进入数据安全页面。 单击左侧导航树中的“权限审批”,在“权限审批”页面,单击“权限通知”进入权限通知页签。 在“权限通知”页面,系统会根据已配置的通知主题,将SMN主题相关的订阅终端信息展示在下方订阅列表中,列表中的用户名称对应订阅备注信息,申请者只能操作备注信息与用户
r?view=sql-server-ver16,建议8.4.1版本。 说明: 驱动文件所在的OBS路径中不能包含中文。 出于安全考虑,当前系统会对所选择的驱动文件校验其SHA512值和字节大小。如不在允许清单中,则会提示报错,推荐您使用建议版本的驱动文件,或联系客服或技术支持人员。
1及以上版本的DLI队列执行作业时,需要您自行在IAM页面创建自定义委托(详见创建DLI自定义委托权限章节),然后再在此处进行选择。 说明: 新建的自定义委托名称不可与系统默认委托重复,即不可以是dli_admin_agency、dli_management_agency、dli_data_clean_agency。
String 消息标题,给邮箱订阅者发送邮件时作为邮件主题。 messageType 是 String 消息类型: NORMAL STRUCTURE TEMPLATE message 是 String 发送的消息。 表26 MRS Spark节点属性说明 参数名 是否必选 参数类型 说明
String 消息标题,给邮箱订阅者发送邮件时作为邮件主题。 messageType 是 String 消息类型 NORMAL STRUCTURE TEMPLATE message 是 String 发送的消息。 表25 MRS Spark节点属性说明 参数名 是否必选 参数类型 说明
通过时间宏变量+定时执行作业,可以实现数据库增量同步和文件增量同步。 如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。 dateformat dateformat支持两种形式的参数:
然后选择实例类型和数据库引擎版本对应的场景资料,参考文档获取驱动包。 说明: 驱动文件所在的OBS路径中不能包含中文。 出于安全考虑,当前系统会对所选择的驱动文件校验其SHA512值和字节大小。如不在允许清单中,则会提示报错,推荐您使用建议版本的驱动文件,或联系客服或技术支持人员。
通过时间宏变量+定时执行作业,可以实现数据库增量同步和文件增量同步。 如果配置了时间宏变量,通过DataArts Studio数据开发调度CDM迁移作业时,系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”,而不是“CDM作业实际启动时间-偏移量”。 dateformat dateformat支持两种形式的参数:
是否必选 参数类型 描述 change_mode 是 Integer 规格变更类型:10:升配;30:降配;40:续费;60:扩容;70:切换操作系统。 resource_id 是 String DataArts Studio实例ID,获取方法请参见实例ID和工作空间ID。 resource_spec_code
Git插件相关操作,可以方便快捷地使用Github代码库。 Tabs 同时打开多个ipynb文件时,通过Tabs激活或选择文件。 Settings JupyterLab工具系统设置。 Help JupyterLab工具自带的帮助参考。 图8 ipynb文件菜单栏中的快捷键 表4 表4 ipynb文件菜单栏中的快捷键
Studio数据连接创建所需连接。 需要测试数据源端和资源组之间网络是否可用,不可用时根据界面提示修改。 选择资源组,集群创建可参见创建CDM集群。 选多个集群时系统会随机下发任务,故需要多个集群时版本规格建议选择集群版本一致的集群,否则可能因为集群版本不一致导致作业失败。 选择已创建的目的端数据连接,
际业务中,请视情况而定,需谨慎设置,以免造成数据丢失。 图7 作业配置 在源端、目的作业配置区域,单击“显示高级属性”,在“高级属性”中,系统提供了默认值,请根据实际业务数据的格式设置各项参数。 例如,本例中根据数据源准备中的样例数据格式,源端高级属性需注意以下参数的设置,其他参
超时重试 最大重试次数 重试间隔时间(秒) 否:默认值,不重新执行节点。 说明: 如果作业节点配置了重试,并且配置了超时时间,该节点执行超时后,系统支持再重试。 当节点运行超时导致的失败不会重试时,您可前往“默认项设置”修改此策略。 当“失败重试”配置为“是”才显示“超时重试”。 当前节点失败后,后续节点处理策略
String 消息标题,给邮箱订阅者发送邮件时作为邮件主题。 messageType 是 String 消息类型 NORMAL STRUCTURE TEMPLATE message 是 String 发送的消息。 表26 MRS Spark节点属性说明 参数名 是否必选 参数类型 说明
不支持同步视图、外键、存储过程、触发器、函数、事件、虚拟列、唯一约束和唯一索引。 不支持同步无日志表(UNLOGGED TABLE)、临时表、系统模式和系统表。 自动建表支持同步表结构、普通索引、约束(主键、空、非空)、注释。 注意事项 除了数据源版本、连接账号权限及同步对象范围外,您还需要注意的事项请参见下表。
、ImpalaSQL、HetuEngineSQL、RDSSQL其中之一时,这个参数是必选的。用户可以通过查询连接列表(待下线)接口获取当前系统中已经存在的连接。默认值为空。 database String 执行SQL语句所关联的数据库,当type参数值为DLISQL、SparkS