金融行业标准网
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111391307.5 (22)申请日 2021.11.23 (71)申请人 深圳云天励飞技 术股份有限公司 地址 518000 广东省深圳市龙岗区园山 街 道龙岗大道8288号深圳大运软件小镇 17栋1楼 (72)发明人 赵智维 黄轩 胡文泽 王孝宇 (74)专利代理 机构 深圳驿航知识产权代理事务 所(普通合伙) 44605 代理人 杨伦 (51)Int.Cl. G06F 16/2458(2019.01) G06N 20/00(2019.01) (54)发明名称 模型训练方法、 装置、 电子设备及存 储介质 (57)摘要 本发明公开了一种模型训练方法、 装置、 电 子设备及存储介质, 该方法包括: 接收筛选命令 对预设数据库中存储的原始数据集进行筛选, 得 到多个目标数据集; 原始数据集中包含元数据和 资源数据, 元数据用于在存储所述资源数据时作 为引用信息及标注集以指向对应的资源数据; 将 多个所述目标数据集按照预设策略进行合并, 并 根据合并结果确定出结果数据集; 利用所述结果 数据集对待训练模型进行训练, 并在满足预设终 止条件时, 终止训练输出所述模型。 使用户不需 要对数据集格式进行修改, 提升了数据集的整体 可用性以及可靠性, 提升产出数据模型的效率, 使数据模型的效果提升更好, 降低了用户对数据 集的操作成本 。 权利要求书2页 说明书10页 附图7页 CN 114185962 A 2022.03.15 CN 114185962 A 1.一种模型训练方法, 其特 征在于, 包括: 接收筛选命令对预设数据库中存储的原始数据集进行筛选, 得到多个目标数据集; 所 述原始数据集中包含元数据和资源数据, 所述元数据用于在存储所述资源 数据时作为引用 信息及标注集以指向对应的资源数据; 将多个所述目标 数据集按照预设策略进行合并, 并根据合并结果确定出 结果数据集; 利用所述结果数据集对待训练模型进行训练, 并在满足预设终止条件时, 终止训练输 出所述模型。 2.根据权利要求1所述的模型训练方法, 其特征在于, 所述接收筛选命令对预设数据库 中存储的原始数据集进行筛 选, 得到多个目标 数据集包括: 根据所述筛 选命令确定对应的第一类关键 字和/或第二类关键 字; 判断所述原始数据集中的数据是否包含所述第一类关键字和/或所述第二类关键字, 以得到判断结果; 根据所述判断结果确定对应的数据以得到多个目标 数据集。 3.根据权利要求1所述的模型训练方法, 其特征在于, 所述预设策略包括第一合并策 略、 第二合并策略及第三合并策略; 所述将多个所述目标数据集按照预设策略进 行合并, 并 根据合并结果确定出 结果数据集包括: 在所述预设策略为第 一合并策略的情况下, 在合并至少两个所述目标数据集中的相同 资源数据时, 将第一个资源数据作为结果进行合并; 在所述预设策略为第 二合并策略的情况下, 在合并至少两个所述目标数据集中的相同 资源数据时, 将最后一个资源数据作为结果进行合并; 在所述预设策略为第 三合并策略的情况下, 在合并至少两个所述目标数据集中的相同 资源数据时, 确定终止合并。 4.根据权利要求3所述的模型训练方法, 其特征在于, 所述将多个所述目标数据集按照 预设策略进行合并, 并根据合并结果确定出 结果数据集, 还 包括: 对所述目标 数据集标注第一前导符、 第二前导符或第三前导符; 将标注有第 一前导符的所述目标数据集确定为第 一目标数据集, 将所述第 一目标数据 集作为训练集进行合并; 将标注有第 二前导符的所述目标数据集确定为第 二目标数据集, 将所述第 二目标数据 集作为验证集进行合并; 将标注有第 三前导符的所述目标数据集确定为第 三目标数据集, 将所述第 三目标数据 集作为测试集进行合并。 5.根据权利要求1所述的模型训练方法, 其特 征在于, 所述模型训练方法, 还 包括: 从所述预设数据库中确定出对应的待挖掘数据集; 基于主动学习从所述待挖掘数据集中确定出样本数据集; 将所述样本数据集 合并至所述目标 数据集中, 得到新的结果数据集; 根据所述 新的结果数据集对所述模型进行重复训练, 直至满足预设终止条件。 6.根据权利要求5所述的模型训练方法, 其特征在于, 所述基于主动学习从所述待挖掘 数据集中确定出样本数据集包括: 根据所述模型对所述待挖掘数据集中的每 个样本数据进行评估, 得到 评估结果;权 利 要 求 书 1/2 页 2 CN 114185962 A 2根据所述评估结果对每个所述样本数据进行排序, 确定出多个评估结果中最优的样本 数据; 将所述多个最优的样本数据进行 标注处理, 确定出样本数据集。 7.根据权利要求6所述的模型训练方法, 其特征在于, 所述将所述多个最优的样本数据 进行标注处理, 确定出样本数据集包括: 判断每个最优的样本数据是否包 含标注信息; 当所述最优的样本数据为不包含标注信 息的第一类样本数据时, 将所述第 一类样本数 据进行标注, 得到标注完成的样本数据集; 当所述最优的样本数据中包含标注信 息的第二类样本数据时, 将所述第 二类样本数据 更新至所述样本数据集。 8.一种模型训练装置, 其特 征在于, 包括: 筛选模块, 用于接收筛选命令对预设数据库中存储的原始数据集进行筛选, 得到多个 目标数据集; 所述原始数据集中包含元数据和资源数据, 所述元数据用于在存储所述资源 数据时作为引用信息及标注集以指向对应的资源数据; 合并模块, 用于将多个所述目标数据集按照预设策略进行合并, 并根据合并结果确定 出结果数据集; 训练模块, 用于利用所述结果数据集对待训练模型进行训练, 并在满足预设终止条件 时, 终止训练输出 所述模型。 9.一种电子设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器上 运行的计算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如权利要求1至7 任一项所述的模型训练方法的步骤。 10.一种计算机可读存储介质, 所述计算机可读存储介质存储有计算机程序, 其特征在 于, 所述计算机程序被处理器执行时实现如权利要求 1至7任一项 所述的模型训练方法的步 骤。权 利 要 求 书 2/2 页 3 CN 114185962 A 3
专利 模型训练方法、装置、电子设备及存储介质
文档预览
中文文档
20 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共20页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-19 01:22:21
上传分享
举报
下载
原文档
(760.6 KB)
分享
友情链接
GB-T 36621-2018 智慧城市 信息技术运营指南.pdf
GB-T 39680-2020 信息安全技术 服务器安全技术要求和测评准则.pdf
GB-T 42374-2023 大众滑雪赛事活动等级划分与评定规范.pdf
GB-T 37096-2018 信息安全技术 办公信息系统安全测试规范.pdf
GM-T 0055-2018 电子文件密码应用技术规范.pdf
DB-T 64-2016 强震动观测技术规程.pdf
GB-T 28827.1-2012 信息技术服务 运行维护 第1部分:通用要求.pdf
GB-T 3513-2018 硫化橡胶 与单根钢丝粘合力的测定 抽出法.pdf
NB-T 20547—2019 核电工程爆破监测技术规程.pdf
GB-T 42381.140-2023 数据质量 第140部分:主数据:特征数据交换:完整性.pdf
GB-T 9813.3-2017 计算机通用规范 第3部分:服务器.pdf
T-QGCML 302—2022 能源企业数字化转型1+6管理体系.pdf
生成式大模型安全与隐私白皮书-之江实验室.pdf
GB/T 38877-2020 电工钢带(片)绝缘涂层.pdf
T-CESA 1254—2023 智慧博物馆建设总体要求.pdf
GB-T 17568-2019 γ辐照装置设计建造和使用规范.pdf
GB-T 14617.1-2012 陆地移动业务和固定业务传播特性 第1部分:陆地移动业务传播特性.pdf
GB-T 26300-2020 镍钴锰三元素复合氢氧化物.pdf
T-SISTB 006—2021 现代物业管理评价指标体系1.0.pdf
GB-T 31464-2022 电网运行准则.pdf
1
/
3
20
评价文档
赞助2元 点击下载(760.6 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。