standard library
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211337417.8 (22)申请日 2022.10.28 (71)申请人 北京澜舟 科技有限公司 地址 100000 北京市海淀区海淀大街3号1 幢10层10 01 (72)发明人 华菁云 王宇龙 周明 (74)专利代理 机构 深圳市智享知识产权代理有 限公司 4 4361 专利代理师 王琴 (51)Int.Cl. G06F 40/205(2020.01) G06F 40/169(2020.01) G06F 40/117(2020.01) G06F 16/2458(2019.01) G06F 16/31(2019.01)G06Q 30/08(2012.01) (54)发明名称 一种公告信息抽取方法、 系统及存 储介质 (57)摘要 本发明涉及互联网招投标技术领域, 特别涉 及一种公告信息抽取方法、 系统及存储介质。 本 发明的公告信息抽取方法包括以下步骤: 获取公 告信息的表格内容与非表格内容; 对表格内容与 非表格内容进行数据预处理; 基于预设抽取模型 对非表格内容进行信息抽取得到第一抽取结果; 基于表格规则扫描表格内容进行信息抽取得到 第二抽取结果; 对第一抽取结果与第二抽取结果 进行后处理得到公告信息的结构化信息。 通过抽 取模型进行主要内容 (非表格内容) 抽取, 具有泛 化性好的优点, 因为抽取模型具有很好的语义理 解能力, 在处理格式略有变化的文档时也能准确 地识别出对应的内容, 极大地提高了识别率。 本 发明还提供了一种公告信息抽取系统与存储介 质。 权利要求书2页 说明书11页 附图8页 CN 115455936 A 2022.12.09 CN 115455936 A 1.一种公告信息抽取 方法, 其特 征在于: 包括以下步骤: 获取公告信息的表格内容与非表格内容; 对表格内容与非表格内容进行 数据预处 理; 基于预设抽取模型对非表格内容进行信息抽取 得到第一抽取 结果; 基于表格规则 扫描表格内容进行信息抽取 得到第二抽取 结果; 对所述第一抽取结果与所述第二抽取结果进行后处理得到所述公告信息的结构化信 息。 2.如权利要求1所述的公告信 息抽取方法, 其特征在于: 获取公告信 息的表格 内容和非 表格内容包括以下步骤: 将网页中的公告信息存 储为html文件; 基于html2text数据库提取html文件中的文本信息得到公告 文本; 基于BeautifulSoup数据库区分所述公告 文本中的表格内容与非表格内容。 3.如权利要求1所述的公告信 息抽取方法, 其特征在于: 对表格 内容进行数据 预处理包 括对无效空格处 理、 对有效空格处 理中的一种或多种; 对非表格内容进行数据预处理包括对无效空格处理、 对有效空格处理以及对文本分 块。 4.如权利要求3所述的公告信息抽取 方法, 其特 征在于: 对文本分块包括以下步骤: 对非表格内容进行 逐行切分; 对切分后的内容进行顺次滑窗拼接, 当拼接到超过512字符时, 则将上一次的拼接结果 作为一个块。 5.如权利要求1所述的公告信 息抽取方法, 其特征在于: 所述预设抽取模型基于初始模 型经过微调得到, 所述初始模型包括Mengzi ‑BERT‑large模型、 Mengzi ‑BERT‑base模型、 Mengzi‑BERT‑3B模型中的一种。 6.如权利要求5所述的公告信 息抽取方法, 其特征在于: 基于初始模型微调包括以下步 骤: 获取训练样本, 对所述训练样本中的非表格内容进行 数据预处 理; 采用BIO序列标注法对经 过数据预处 理后的非表格内容标注; 调整参数对初始模型进行微调。 7.如权利要求1所述的公告信 息抽取方法, 其特征在于: 对所述第 一抽取结果与所述第 二抽取结果进行后处 理采用模糊匹配算法。 8.一种公告信 息抽取系统, 用于实现如权利要求1 ‑7任一项所述的公告信息抽取方法, 其特征在于: 包括表格识别模块、 数据预处理模块、 第一抽取器、 第二抽取器以及后处理模 块; 所述表格识别模块与所述数据预处理模块信号连接; 所述第一抽取器分别与所述数据 预处理模块以及所述后处理模块信号连接; 所述第二抽取器分别与所述数据预 处理模块以 及所述后处 理模块信号连接; 所述表格识别模块用于获取表格内容与非表格内容; 所述数据预处 理模块用于对所述表格内容以及所述非表格内容进行 数据预处 理; 所述第一抽取器为基于预训练模型的抽取器, 用于对非表格内容进行信 息抽取得到第 一抽取结果;权 利 要 求 书 1/2 页 2 CN 115455936 A 2所述第二抽取器用于对表格内容进行信息抽取 得到第二抽取 结果; 所述后处理模块用于使所述第一抽取结果与所述第二抽取结果中的内容与所述公告 信息中的表述完全一 致。 9.如权利要求8所述的公告信 息抽取系统, 其特征在于: 所述后处理模块包括模糊匹配 模块, 所述模糊匹配模块通过模糊匹配大小写、 模糊匹配空格、 模糊匹配生僻字中的一种或 多种使所述第一抽取结果与所述第二抽取结果中的内容与所述公告信息中的表述完全一 致。 10.一种存储介质, 其上存储有计算机程序, 其特征在于: 所述计算机程序被处理器执 行时实现权利要求1 ‑7任一项所述的公告信息抽取 方法。权 利 要 求 书 2/2 页 3 CN 115455936 A 3
专利 一种公告信息抽取方法、系统及存储介质
文档预览
中文文档
22 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共22页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-18 22:34:04
上传分享
举报
下载
原文档
(893.8 KB)
分享
友情链接
GB-T 26540-2022 墙体保温系统用钢丝网架复合保温板.pdf
T-CFA 031103.5--2018—2018 铸造数字化工厂通用技术要求.pdf
绿盟 赵粮 大模型浪潮下的全球网络安全思考-2023TechWorld-final.pdf
GB-T 42748-2023 专利评估指引.pdf
T-ZZB 0518—2018 低压电器用抗高温黄变阻燃增强聚酰胺.pdf
GB-T 38633-2020 信息技术 大数据 系统运维和管理功能要求.pdf
WDTA AI-STR-02-LLM security Large Language Model Security.pdf
DB14-T 2136-2020 《特种设备风险分级管控实施指南》 山西省.pdf
T-GSA 2—2018 信息化项目软件开发费用测算规范.pdf
DB37-T 4646.2—2023 公共数据 数据治理规范 第2部分:数据清洗比对 山东省.pdf
GB-T 20020-2013 气相二氧化硅.pdf
GB-T 42864-2023 液化天然气的取样设施及取样性能检验.pdf
DB32-T 4264-2022 金属冶炼企业中频炉使用安全技术规范 江苏省.pdf
MH-T 1020-2018 锂电池航空运输规范.pdf
法律法规 杭州市民用建筑节能条例2014-12-31.pdf
GB-T 25742.2-2013 机器状态监测与诊断 数据处理、通信与表示 第2部分:数据处理.pdf
GB-T 33207-2016 无损检测 在役金属管内氧化皮堆积的磁性检测方法.pdf
T-CI 155—2023 基于多模态大模型的智慧交通出行技术规范.pdf
DB3306-T 045-2022 公共图书馆数字媒体服务规范 绍兴市.pdf
DB31-T 1363-2022 口腔综合治疗台水路卫生管理要求 上海市.pdf
1
/
22
评价文档
赞助2.5元 点击下载(893.8 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。