金融行业标准网
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111507205.5 (22)申请日 2021.12.10 (71)申请人 腾讯科技 (深圳) 有限公司 地址 518057 广东省深圳市南 山区高新区 科技中一路腾讯大厦3 5层 (72)发明人 王明 (74)专利代理 机构 广州三环 专利商标代理有限 公司 44202 代理人 陈梅君 (51)Int.Cl. G06F 16/35(2019.01) G06F 16/33(2019.01) G06K 9/62(2022.01) G06N 20/00(2019.01) (54)发明名称 语料标签获取方法、 装置及计算机设备 (57)摘要 本申请实施例公开了一种语料标签获取方 法、 装置及计算机设备, 涉及人工智 能领域的机 器学习技术, 该方法包括: 获取待训练模 型的k个 样本标签及每个样本标签对应的初始 语料数据, 对各个初始语料数据进行编码, 得到k个样本标 签分别对应的标签语料向量; 获取候选语料数 据, 将候选语料数据编码成为候选语料向量; 获 取k个标签语料向量分别与候选语料向量之间的 向量相似度, 基于向量相似度对k个标签语料向 量进行整合, 得到候选语料数据对应的候选预测 结果向量; 基于候选预测结果向量确定候选语料 数据的候选语料标签, 将候选语料标签及候选语 料数据确定为待训练模型的训练样 本。 采用本申 请, 可以提高语料扩 充的准确性及效率。 权利要求书4页 说明书22页 附图9页 CN 114328915 A 2022.04.12 CN 114328915 A 1.一种语料 标签获取 方法, 其特 征在于, 所述方法包括: 获取待训练模型的k个样本标签, 及每个样本标签对应的初始语料数据, 对所述每个样 本标签对应的初始语料数据进行编码, 得到所述k个样本标签分别对应的标签语料向量; k 为正整数; 获取候选语料 数据, 将所述 候选语料 数据编码成为 候选语料向量; 获取k个标签语料向量分别与所述候选语料向量之间的向量相似度, 基于所述向量相 似度对所述 k个标签语料向量进行整合, 得到所述 候选语料 数据对应的候选预测结果向量; 基于所述候选预测结果向量确定所述候选语料数据的候选语料标签, 将所述候选语料 标签及所述 候选语料 数据确定为所述待训练模型的训练样本 。 2.如权利要求1所述的方法, 其特征在于, 所述每个样本标签对应的初始语料数据的数 量为至少两个; 所述对所述每个样本标签对应的初始语料数据进行编码, 得到所述k个样本标签分别 对应的标签 语料向量, 包括: 对第i个样本标签对应的至少两个初始语料数据分别进行编码, 得到所述第 i个样本标 签对应的至少两个初始语料 数据分别对应的初始语料向量; i 为小于或等于k的正整数; 对所述第 i个样本标签对应的至少两个初始语料向量进行向量融合, 得到所述第 i个样 本标签对应的标签 语料向量。 3.如权利要求1所述的方法, 其特征在于, 所述获取k个标签语料向量分别与所述候选 语料向量之间的向量相似度, 包括: 获取所述k个样本标签分别对应的标签向量; 对关联有相同样本标签的标签语料向量和标签向量进行融合, 得到每个样本标签分别 对应的优化语料向量; 获取k个优化语料向量分别与所述 候选语料向量之间的向量相似度。 4.如权利要求1所述的方法, 其特征在于, 所述候选预测结果向量包括k个候选预测类 别以及每 个候选预测类别分别对应的预测概 率; 所述基于所述候选预测结果向量确定所述候选语料数据的候选语料标签, 将所述候选 语料标签及所述 候选语料 数据确定为所述待训练模型的训练样本, 包括: 从所述k个候选预测类别中, 获取所述预测概率最大的候选预测类别, 将所述预测概率 最大的候选预测类别, 确定为所述 候选语料 数据的候选语料 标签; 获取语料选取阈值, 若所述候选语料标签对应的预测概率大于或等于所述语料选取阈 值, 则将所述 候选语料 标签及所述 候选语料 数据确定为所述待训练模型的训练样本 。 5.如权利要求1所述的方法, 其特 征在于, 所述 候选语料 数据的数量 为N个; N为正整数; 所述基于所述候选预测结果向量确定所述候选语料数据的候选语料标签, 将所述候选 语料标签及所述 候选语料 数据确定为所述待训练模型的训练样本, 包括: 基于N个候选语料数据分别对应的候选预测结果向量, 确定所述N个候选语料数据分别 对应的候选语料 标签; 基于所述待训练模型中所述每 个样本标签对应的初始语料 数据, 确定样本扩充数量; 若N小于或等于所述样本扩充数量, 则将所述N个候选语料数据与所述N个候选语料数 据分别对应的候选语料 标签, 确定为所述待训练模型的训练样本;权 利 要 求 书 1/4 页 2 CN 114328915 A 2若N大于所述样本扩充数量, 则基于所述N个候选语料数据分别对应的候选预测结果向 量, 确定所述N个候选语料数据分别对应的语料置信度, 基于所述语料置信度从所述N个候 选语料数据以及所述N个候选语料数据分别对应的候选语料标签中, 获取所述待训练模型 的训练样本 。 6.如权利要求1所述的方法, 其特征在于, 所述待训练模型的训练样本包括训练样本数 据及训练样本标签; 所述训练样本数据包括所述候选语料数据及所述每个样本标签对应的 初始语料 数据; 所述方法还 包括: 将所述训练样本数据输入所述待训练模型中进行预测, 得到所述训练样本数据对应的 样本预测结果; 根据所述样本预测结果与 所述训练样本标签生成第 一损失函数, 基于所述第 一损失函 数对所述待训练模型进行参数调整, 得到目标模型。 7.如权利要求6所述的方法, 其特 征在于, 所述方法还 包括: 接收针对待解析数据的数据解析请求, 将所述待解析数据输入所述目标模型中进行预 测, 得到所述待解析 数据的第一 解析结果; 获取历史解析数据及所述历史解析数据对应的历史解析结果, 对所述待解析数据与 所 述历史解析 数据进行匹配, 得到所述待解析 数据与所述历史解析 数据之间的数据匹配度; 基于所述数据匹配度及所述历史解析 结果, 确定所述待解析 数据的第二 解析结果; 对所述第一解析结果及所述第 二解析结果进行整合, 得到所述待解析数据的目标解析 结果。 8.如权利要求6所述的方法, 其特 征在于, 所述方法还 包括: 接收针对待解析数据的数据解析请求, 将所述待解析数据输入所述目标模型中进行预 测, 得到所述待解析 数据的第一 解析结果; 获取语料模板, 从所述语料模板中获取与所述待解析数据相匹配的目标语料模板, 将 所述目标语料模板所对应的模板解析 结果确定为所述待解析 数据的第三 解析结果; 对所述第一解析结果与所述第 三解析结果进行整合, 得到所述待解析数据的目标解析 结果。 9.如权利要求6所述的方法, 其特 征在于, 所述方法还 包括: 接收针对待解析数据的数据解析请求, 将所述待解析数据输入所述目标模型中进行预 测, 得到所述待解析 数据的第一 解析结果; 在关键信息提取模型中提取所述待解析数据的待解析关键信 息, 对所述待解析关键信 息进行语义分析, 确定所述待解析 数据的第四解析 结果; 对所述第一解析结果与所述第四解析结果进行整合, 得到所述待解析数据的目标解析 结果。 10.如权利要求9所述的方法, 其特 征在于, 所述方法还 包括: 将所述训练样本数据输入初始关键信 息提取模型进行预测, 得到所述训练样本数据对 应的预测关键信息; 根据所述预测关键信息确定所述训练样本数据所对应的关键预测结果; 根据所述关键预测结果与 所述训练样本标签生成第 二损失函数, 基于所述第 二损失函 数对所述初始关键信息提取模型进行参数调整, 得到关键信息提取模型。权 利 要 求 书 2/4 页 3 CN 114328915 A 3
专利 语料标签获取方法、装置及计算机设备
文档预览
中文文档
36 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共36页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-19 01:22:52
上传分享
举报
下载
原文档
(1.3 MB)
分享
友情链接
NIST SP 800-61 R2 Computer Security Incident Handling Guide 英文版.pdf
GB-T 32911-2016 软件测试成本度量规范.pdf
硅创社2024001-AIGC2023~2024跨年报告V1.0 2024.pdf
安华金和 数据安全治理白皮书5.0 行业数据安全治理实践集.pdf
T-GDC 232—2023 企业数字化水平评价规范.pdf
专利 一种私域网络的安全访问控制方法、系统和可读存储介质.PDF
DB 31DSJ∕Z 005-2020 公共数据安全分级指南.pdf
T-CSBT 002—2019 血液筛查反应性献血者归队指南.pdf
GB-T 35275-2017 信息安全技术 SM2密码算法加密签名消息语法规范.pdf
GB-T 18607-2017 石油天然气工业 钻井和采油设备 往复式整筒抽油泵.pdf
GB-T 32918.2-2016 信息安全技术 SM2椭圆曲线公钥密码算法 第2部分:数字签名算法.pdf
4.信息系统运行和业务恢复能力水印版.pdf
GB-T 1553-2023 硅和锗体内少数载流子寿命的测定 光电导衰减法.pdf
360 企业个人信息合规思路与实践报告 2021.pdf
GB-T 22024-2008 气雾剂级正丁烷 A-17.pdf
ISO IEC 27017-2015 中文版.pdf
GB-T 15843.3-2023 信息技术 安全技术 实体鉴别 第3部分:采用数字签名技术的机制.pdf
GB-T 32212-2015 液相色谱用固定波长光度检测器的测试方法.pdf
T-CXZCX 001—2023 餐饮外卖一次性密封规范.pdf
GB-T 42548-2023 海洋调查船舶舷外调查设备布放与回收安全管理规范.pdf
1
/
3
36
评价文档
赞助2元 点击下载(1.3 MB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。