检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用大模型进行数据加工/合成/标注 利用大模型辅助数据加工/合成/标注任务,提升数据处理的智能化水平。平台支持用户注册ModelArts部署和三方服务两种部署方式的模型,用户可根据需求选择合适的大模型进行辅助。
Ubuntu系统 在线安装: sudo apt install nfs-kernel-server Euler OS系统 在线安装: sudo yum install nfs-utils 若需离线安装,请联系盘古客服。
Token认证 Token在计算机系统中代表令牌(临时)的意思,拥有Token就代表拥有某种权限。Token认证就是在调用API的时候将Token加到请求消息头,从而通过身份认证,获得操作API的权限。
AI辅助功能介绍 标注任务中,标注员对单条数据可选择地执行标注数据的智能生成,具体操作如下。 在“创建标注任务”页面,选择数据集、开启AI辅助并选择模型后单击“完成创建”。 图8 AI辅助功能 在“标注任务”页面,单击任务名称对应操作列的“作业”,可进入标注界面。
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 基本信息 服务名称 设置部署任务的名称。 描述(选填) 设置部署任务的描述。
根据授权项策略,系统会自动推荐授权范围方案。 可以选择“所有资源”,即用户组内的IAM用户可以基于设置的授权项使用账号中所有的企业项目、区域项目、全局服务资源。 可以选择“指定区域项目资源”,如指定“西南-贵阳一”区域,即用户组内的IAM用户仅可使用该区域项目中的资源。
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 发布模型 是否开启自动发布 关闭,训练完成后手动发布到模型资产。 开启,配置可见性、模型名称和描述。 基本信息 任务名称 模型压缩任务的名称。 压缩后模型名称 设置压缩后的模型名称。
基于文本对话功能,用户可以与医学行业大模型进行自然而流畅的对话和交流,实现医学领域的文本生成、行业推理等场景 三方大模型 三方NLP大模型 DeepSeek API是基于DeepSeek大模型推出的接口服务,它支持多场景文本交互,能够快速生成高质量对话、文案、故事等内容,可用于文本摘要、智能问答
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 发布模型 开启自动发布 开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。 基本信息 名称 训练任务名称。
ACC ACC(异常相关系数,距平相关系数,Anomaly Correlation Coefficient)是一个重要的统计指标,用于衡量预报系统的质量。它通过计算预报值与观测值之间的相关性来评估预报的准确性。
在“基本配置”中选择数据用途、数据集可见性、使用场景和格式配置,“格式配置”选择发布格式为“盘古格式-思维链”。 填写数据集名称、描述,设置扩展信息后,单击“确认”,发布数据集。 详细数据发布步骤请见配比并发布数据集。 父主题: 盘古NLP模型蒸馏实践
在一个客户服务问答系统中,可以用特定领域(如电商、保险)的对话数据对预训练模型进行微调,使其更好地理解和回答与该领域相关的问题。 此外,针对微调训练任务,平台提供了两种微调方式: 全量微调:适合有充足数据并关注特定任务性能的场景。
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 发布模型 开启自动发布 开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。 基本信息 名称 训练任务名称。
通用能力:主要包含通用领域的数据集评测任务,如文本分类、逻辑推理、情感分析、问答系统等任务。 行业能力:主要包含特定领域的数据集评测任务,如金融实体识别、金融文本分类、金融内容生成等任务。 模型评测维度与标准: 完整性:确定大模型的响应是否完全解决用户的问题。
通用能力:主要包含通用领域的数据集评测任务,如文本分类、逻辑推理、情感分析、问答系统等任务。 行业能力:主要包含特定领域的数据集评测任务,如金融实体识别、金融文本分类、催收意图识别等任务。 模型评测维度与标准: 完整性:确定大模型的响应是否完全解决用户的问题。
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 发布模型 开启自动发布 开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。 基本信息 名称 训练任务名称。
ACC ACC(异常相关系数,距平相关系数,Anomaly Correlation Coefficient)是一个重要的统计指标,用于衡量预报系统的质量。它通过计算预报值与观测值之间的相关性来评估预报的准确性。
在“创建合成任务”页面,选择需要合成的数据集,选择合成内容与预期合成条数,如图1,系统指定预期合成条数则为数据集初始数据条数。
订阅提醒 订阅提醒 该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。 发布模型 开启自动发布 开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。 基本信息 名称 训练任务名称。