standard library
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210036918.6 (22)申请日 2022.01.13 (71)申请人 重庆邮电大 学 地址 400000 重庆市南岸区南 山街道崇文 路2号 (72)发明人 夏书银 杨宁 张勇  (74)专利代理 机构 成都行之专利代理事务所 (普通合伙) 51220 专利代理师 梁田 (51)Int.Cl. G06F 16/335(2019.01) G06F 40/289(2020.01) G06F 40/30(2020.01) G06K 9/62(2022.01) G06N 3/04(2006.01)G06N 3/08(2006.01) (54)发明名称 一种多特征匹配的文本匹配方法、 终端及可 读存储介质 (57)摘要 本发明公开了一种多特征匹配的文本匹配 方法、 终端及可读存储介质, 涉及自然语言处理 领域, 解决了现有的文本匹配方法忽略了文本中 细粒度的信息以及文本整体语义信息, 获取待匹 配文本、 候选文本, 对所述待匹配文本、 候选文本 进行预处理; 对预处理后的文本进行基于N ‑Gram 的多粒度解析, 获得不同粒度下的文本序列, 将 所述文本序列进行向量化, 获得文本向量; 将所 述文本向量列输入深度学习语言模型中进行训 练, 获得待匹配文本、 候选文本的编码向量; 将所 述待匹配文本编码、 候选文本的编码向量进行相 似度计算后求和取平均, 获得待匹配文本、 候选 文本的匹配度; 本发明结合细粒度的词项语义信 息与粗粒度的文本整体语义信息, 提升了文本匹 配的准确度。 权利要求书2页 说明书6页 附图2页 CN 114461782 A 2022.05.10 CN 114461782 A 1.一种多特 征匹配的文本匹配方法, 其特 征在于, 所述方法包括以下步骤: 获取待匹配文本和候选文本, 对所述待匹配文本和候选文本进行 预处理; 对预处理后的文本进行基于N ‑Gram的多粒度解析, 获得不同粒度下的文本序列, 将所 述文本序列进行向量 化, 获得文本向量; 将所述文本向量列输入深度 学习语言模型中进行训练, 获得待 匹配文本和候选文本的 编码向量; 将所述待 匹配文本编码和候选文本的编码向量进行相似度计算后 求和取平均, 获得待 匹配文本和候选文本的匹配度。 2.根据权利要求1所述的一种 多特征匹配的文本匹配方法, 其特征在于, 将所述待 匹配 文本和候选文本的无用符号和停用词去除, 采用分词工具对所述待匹配文本和候选文本进 行分词处 理。 3.根据权利要求2所述的一种多特征匹配的文本匹配方法, 其特征在于, 以1 ‑Gram, 2‑ Gram和3‑Gram三种粒度方式对待匹配文本与候选文本进行解析, 其中, 分词处理后的结果 即为1‑Gram所解析的文本序列, 2 ‑Gram按照分词处理后的文本序列自身的顺序进行两两组 合, 3‑Gram按照分词处 理后的文本序列自身的顺序进行三 三组合。 4.根据权利要求3所述的一种 多特征匹配的文本匹配方法, 其特征在于, 将三种粒度解 析出的文本序列转化为文本向量矩阵输入深度学习语言模型, 分别对三种不同文本解析方 式进行训练, 获得待匹配文本和候选文本的编码向量。 5.根据权利要求4述的一种 多特征匹配的文本匹配方法, 其特征在于, 将所述待 匹配文 本和候选文本的编码向量进行相似度计算的计算 式为 n∈(1,2, 3); 其中, 表示待匹配文本和候选文本在词粒度为n时的文本相似度, 表示待匹配文 本的文本表征向量, 表示候选文本的文本表征向量。 6.根据权利要求5所述的一种 多特征匹配的文本匹配方法, 其特征在于, 所述待 匹配文 本和候选文本的匹配度的计算式为 其中, 表示1‑Gram粒度解析 的文本相似度, 表示2‑Gram粒度解析的文本相似度, 表示3‑Gram粒度解析的文本相 似度。 7.根据权利要求6所述的一种 多特征匹配的文本匹配方法, 其特征在于, 对所述待 匹配 文本进行匹配时, 在所述候选文本中计算与所述待匹配文本的匹配度, 并根据所述匹配度 的数值与相似度阈值进行比较, 所述匹配度的数值大于所示相似度阈值返回候选文本的所 有排序结果, 获得最接 近所述待匹配文本语义的候选文本 。 8.根据权利要求4所述的一种多特征匹配的文本匹配方法, 其特征在于, 通过faiss工 具包将所述 候选文本的编码向量进行索引化, 并保存索引化后的编码向量。 9.一种多特征匹配终端, 包括存储器、 处理器以及存储在存储器中并可在所述处理器 上运行的计算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如权利要求 1‑8 中任一项所述的方法的步骤。 10.一种计算机可读存储介质, 所述计算机可读存储介质存储有计算机程序, 其特征在权 利 要 求 书 1/2 页 2 CN 114461782 A 2于, 所述计算机程序被处 理器执行时实现如权利要求1 ‑8中任一项所述的方法的步骤。权 利 要 求 书 2/2 页 3 CN 114461782 A 3

PDF文档 专利 一种多特征匹配的文本匹配方法、终端及可读存储介质

文档预览
中文文档 11 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共11页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种多特征匹配的文本匹配方法、终端及可读存储介质 第 1 页 专利 一种多特征匹配的文本匹配方法、终端及可读存储介质 第 2 页 专利 一种多特征匹配的文本匹配方法、终端及可读存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-18 22:33:56上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。