(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211128214.8 (22)申请日 2022.09.16 (71)申请人 北京无代码科技有限公司 地址 100000 北京市通州区新 华南路64号2 层2092 (72)发明人 杨超　 (74)专利代理 机构 北京华清迪源知识产权代理 有限公司 1 1577 专利代理师 胡乐 (51)Int.Cl. G06K 9/62(2022.01) G06F 16/955(2019.01) G06F 16/951(2019.01) G06F 16/81(2019.01) G06F 16/36(2019.01) (54)发明名称 一种多源数据的汇聚融合方法和系统 (57)摘要 本申请公开了一种多源数据的汇聚融合方 法和系统， 方法包括： 通过可视化数据建模或自 动化数据建模方式， 进行多源数据建模； 通过统 一接入传感器， 实现多种类型数据源的统一接 入； 对各类数据进行智 能处理和融合； 建立数据 智能服务网关， 动态扩展标准化、 开放式的接口 服务， 实现多源数据的统一抽象和服务封装， 为 外部系统提供各类开放式数据应用场景的快速 接入能力。 本申请能够提供可视化建模能力， 面 向多种数据源、 异构类型海量数据进行统一接 入、 自动汇聚管理， 并进行各类数据的智能处理 与数据融合； 本申请可支撑模块化、 可视化、 专业 化大数据汇聚平台建设等数据应用场景， 全面覆 盖多源数据接入、 数据汇聚、 数据处理与融合场 景的相关技 术需求。 权利要求书2页 说明书7页 附图4页 CN 115438740 A 2022.12.06 CN 115438740 A 1.一种多源数据的汇聚融合方法， 其特 征在于， 包括： S1， 通过可视化数据建模或自动化数据建模方式， 进行多源数据建模； S2， 通过统一接入传感器， 实现多种类型 数据源的统一接入； S3， 对各类数据进行智能处 理和融合； S4， 建立数据智能服务网关， 动态扩展标准化、 开放式的接口服务， 实现多源数据的统 一抽象和服 务封装， 为外 部系统提供 各类开放式数据应用场景的快速 接入能力。 2.根据权利要求1所述的多源数据的汇聚融合方法， 其特征在于， 可视化数据建模包 括： 定义数据模型类别； 定义数据模型字段属性和类型； 定义数据模型字段排序和展示方式； 自动化数据建模 包括： 提取原始数据样本 字段及内容； 自动生成数据模型及字段类型； 根据原始数据样本， 自动生成字段排序方式。 3.根据权利要求1所述的多源数据的汇聚融合方法， 其特征在于， 所述多种类型数据源 包括关系型 数据库、 非关系型 数据库、 新型 数据存储技术存储器、 数据文件和外 部网站。 4.根据权利要求1所述的多源数据的汇聚融合方法， 其特 征在于， 步骤S2具体包括： 通过接入传感器， 集中适配多源异构环境， 构建统一数据接入通道； 选择数据源； 选择数据采集传感器； 加载数据接入 模板； 映射数据模型， 完成数据接入配置 。 5.根据权利要求1所述的多源数据的汇聚融合方法， 其特 征在于， 步骤S3具体包括： 参考国家标准、 行业 最佳实践， 统一数据指标 标准和模型； 进行数据处理与数据清洗， 所述数据处理包括统一数据识别、 数据智能分析、 数据智能 处理； 进行数据入库。 6.根据权利要求5所述的多源数据的汇聚融合方法， 其特征在于， 所述统一数据识别包 括： 基于数据识别技术实现互联网数据分析处理， 获取国家、 省、 地市web站点并从页面中 提取结构化的数据， 实现面向特定站点和栏目的定向抓取； 识别数据属性， 通过路径 表达式选取 XML文档中的节点或者节点 集； 针对获取的非结构化数据， 通过文档解析技 术， 实现文档的内容 解析与识别。 7.根据权利要求5所述的多源数据的汇聚融合方法， 其特征在于， 所述数据智能分析包 括： 通过自监督学习框架， 提取数据特征值， 实现面向数据类别、 业务分类的自然语义标签 体系和数据融合模型， 从而实现多源数据的关联建立， 实现对多源异构数据的智能融合； 运用知识图谱技术， 采用基于概念标签的画像构建方法， 建立数据治理行为标签管理权　利　要　求　书 1/2 页 2 CN 115438740 A 2体系； 运用基于 字符模式、 语法模式、 语义模式的基础模式识别方法， 实现数据的融合。 8.根据权利要求5所述的多源数据的汇聚融合方法， 其特征在于， 所述数据智能处理包 括： 对数据类型和单个字段长度进行修 正； 字段解码映射； 字段拆分； 信息合并， 通过预定义规则将存在于同一个源系统或不同源系统中的数据进行有机组 合， 形成一个新的实体。 9.根据权利要求1所述的多源数据的汇聚融合方法， 其特征在于， 所述数据智能服务网 关的功能包括接口调用路由、 限流熔断、 流 量控制、 安全防护和角色鉴权 。 10.一种多源数据的汇聚融合系统， 其特 征在于， 包括： 多源数据建模模块， 用于通过可视化数据建模或自动化数据建模方式， 进行多源数据 建模； 多源数据统一接入 模块， 用于通过统一接入传感器， 实现多种类型 数据源的统一接入； 多源数据智能处 理与融合模块， 用于对各类数据进行智能处 理和融合； 多源数据智能服务网关建立模块， 用于建立数据智能服务网关， 动态扩展标准化、 开放 式的接口服务， 实现多源数据的统一抽象和服务封装， 为外部系统提供各类开放式数据应 用场景的快速 接入能力。权　利　要　求　书 2/2 页 3 CN 115438740 A 3