(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210752349.5 (22)申请日 2022.06.29 (71)申请人 北京飞象星球科技有限公司 地址 100102 北京市朝阳区广顺 南大街8号 院1号楼1层101内4层F01单 元内02号 (72)发明人 吴通通　刘洋　赵薇　柳景明　 (74)专利代理 机构 北京智信禾专利代理有限公 司 11637 专利代理师 张瑞 (51)Int.Cl. G06F 30/12(2020.01) G06V 10/74(2022.01) G06V 10/762(2022.01) G06V 10/764(2022.01) (54)发明名称 图形界面处 理方法及装置 (57)摘要 本申请提供图形界面处理方法及装置， 其中 所述图形界面处理方法包括： 根据图形界面中每 个元素的属性信息， 创建元素比对信息集合， 其 中， 元素比对信息集合中包含元素间的元素比对 信息； 获取图形界面中的两个待比对组件， 确定 每个待比对组件的元素关联信息； 根据每个待比 对组件的元素关联信息确定目标组件比对规则， 以及在元素比对信息集合中确定目标元素比对 信息， 其中， 目标元素比对信息为两个待比对组 件包含的元素间的比对信息； 基于目标组件比对 规则和目标元素比对信息生成两个待比对组件 的组件比对信息。 通过先确定每两个元素间的元 素比对信息， 再确定每个待比对组件的组件比对 信息， 实现任意两个组件之间的比对， 为后续组 件归类提供参照依据。 权利要求书3页 说明书15页 附图5页 CN 115033945 A 2022.09.09 CN 115033945 A 1.一种图形界面处 理方法， 其特 征在于， 包括： 根据图形界面中每个元素的属性信 息， 创建元素比对信 息集合， 其中， 所述元素比对信 息集合中包含元素间的元 素比对信息； 获取所述图形界面中的两个待比对组件， 确定每 个待比对组件的元 素关联信息； 根据每个待比对组件的元素关联信 息确定目标组件比对规则， 以及在所述元素比对信 息集合中确定目标元素比对信息， 其中， 目标元素比对信息为所述两个待比对组件包含的 元素间的比对信息； 基于所述目标组件比对规则和所述目标元素比对信息生成所述两个待比对组件的组 件比对信息 。 2.如权利要求1所述的方法， 其特征在于， 待转换元素的属性信息中包含类型描述信 息； 根据图形界面中每 个元素的属性信息， 创建元 素比对信息集 合之前， 所述方法还 包括： 确定所述图形界面中类型描述信息属于待转换类型的待转换 元素； 将所述待转换元素的类型描述信息变更为通用类型， 并根据通用类型的待转换元素， 以及所述图形界面中的原 始元素创建所述图形界面对应的元 素集合。 3.如权利要求2所述的方法， 其特征在于， 根据图形界面中每个元素的属性信息， 创建 元素比对信息集 合， 包括： 确定所述元素集合中的n个元素， 根据所述n个元素生成m个元素对， 其中， 根据每个元素的属性信息确定每 个元素对的元 素比对信息； 根据每个元素比对信息创建元 素比对信息集 合。 4.如权利要求3所述的方法， 其特征在于， 任意一个元素对的元素比对信 息通过以下方 式确定， 包括： 根据待比对元 素对中两个元 素对应的属性信息判断所述两个元 素的类型 是否相同； 若是， 根据所述两个元素的类型确定目标元素比对规则， 基于所述目标元素比对规则 和每个元素对应的属性信息计算所述待比对元素对的第一比对值， 将所述第一比对值作为 元素比对信息； 若否， 确定所述待比对元素对的第二比对值为零， 将所述第二比对值作为元素比对信 息。 5.如权利要求1所述的方法， 其特征在于， 根据所述两个待比对组件的元素关联信 息确 定目标组件比对规则， 包括： 根据每个待比对组件的元 素关联信息确定每 个待比对组件的组件类型； 根据所述两个待比对组件的组件类型确定目标组件比对规则。 6.如权利要求1所述的方法， 其特征在于， 所述两个待比对组件包括第 一待比对组件和 第二待比对组件； 相应的， 根据 所述两个待比对组件的元素关联信 息在所述元素比对信 息集合中确定目 标元素比对信息， 包括：权　利　要　求　书 1/3 页 2 CN 115033945 A 2根据所述第一待比对组件的元 素关联信息确定所述第一待比对组件 对应的第一元 素； 根据所述第二待比对组件的元 素关联信息确定所述第二待比对组件 对应的第二元 素； 基于所述第一元 素和所述第二元 素确定目标 元素对； 根据所述目标 元素对在所述元 素比对信息集 合中确定目标 元素比对信息 。 7.如权利要求1所述的方法， 其特征在于， 所述两个待比对组件包括第 三待比对组件和 第四待比对组件； 相应的， 根据 所述两个待比对组件的元素关联信 息在所述元素比对信 息集合中确定目 标元素比对信息， 包括： 根据所述第三待比对组件的元素关联信息确定所述第三待比对组件对应的第三初始 元素比对信息集 合； 根据所述第四待比对组件的元素关联信息在所述第三初始元素比对信息集合中筛选 所述第四待比对组件 对应的第四初始元 素比对信息， 并作为目标 元素比对信息 。 8.如权利要求5所述的方法， 其特征在于， 根据所述两个待比对组件的组件类型确定目 标组件比对规则， 包括： 在所述两个待比对组件的组件类型均为元素类型的情况下， 在元素比对规则中确定目 标组件比对规则； 在所述两个待比对组件的组件类型中包括一个元素类型的情况下， 确定元素组件比对 规则为目标组件比对规则； 在所述两个待比对组件的组件类型中不包括元素类型的情况下， 确定组件比对规则为 目标比对规则。 9.如权利要求8所述的方法， 其特 征在于， 所述元 素组件比对规则为以下公式， 包括： 其中， sim(a,b)为组件a和元 素b的元素比对信息， area(mi)为组件a 中每个元素的面积。 10.如权利要求8所述的方法， 其特 征在于， 所述组件比对规则为以下公式， 包括： 其中， sim(a,b)为组件a和组件b的元素比对信息， area(mi)为组件a中每个 元素的面积， area(nj)为组件b中每 个元素的面积。 11.如权利要求1 ‑10任意一项所述的方法， 其特 征在于， 所述方法还 包括： 在所述两个待比对组件中确定基准组件和待归类组件； 根据所述组件比对信息对所述待归类组件进行归类处 理。 12.一种图形界面处 理装置， 其特 征在于， 包括： 创建模块， 被配置为根据图形界面中每个元素的属性信 息， 创建元素比对信息集合， 其 中， 所述元 素比对信息集 合中包含元素间的元 素比对信息； 获取模块， 被配置为获取所述图形界面中的两个待比对组件， 确定每个待比对组件的 元素关联信息； 确定模块， 被配置为根据每个待比对组件的元素关联信息确定目标组件比对规则， 以权　利　要　求　书 2/3 页 3 CN 115033945 A 3