(19)国家知识产权局
(12)发明 专利
(10)授权公告 号
(45)授权公告日
(21)申请 号 202210352736.X
(22)申请日 2022.04.06
(65)同一申请的已公布的文献号
申请公布号 CN 114491775 A
(43)申请公布日 2022.05.13
(73)专利权人 北京飞渡科技有限公司
地址 102600 北京市昌平区欣雅 街15号院1
号楼6层6 08
(72)发明人 何文武 宋彬 蒙胜宇
(74)专利代理 机构 北京艾格律诗专利代理有限
公司 11924
专利代理师 谢毅
(51)Int.Cl.
G06F 30/13(2020.01)
G06T 17/10(2006.01)G06N 3/04(2006.01)
(56)对比文件
CN 113869429 A,2021.12.31
CN 106294918 A,2017.01.04
CN 114185428 A,202 2.03.15
WO 2022064242 A1,202 2.03.31
审查员 董显彬
(54)发明名称
一种元宇宙三维建 筑模型风格化迁移方法
(57)摘要
本发明提供一种元宇宙三维建筑模型风格
化迁移方法, 该方法包括: a1.建筑构 件模型文件
预处理; a2.建筑构件贴图的风格化迁移; a3.利
用深度学习模型, 学习不同风格的特征, 用该特
征将输入的原始二维或三维建筑构件进行风格
变换, 变换后的二维或三维建筑构 件进行纹理及
凹凸贴图替换。 本发明基于深度学习的风格迁移
在三维模型上的应用, 满足虚拟数字世界中对于
三维模型进行风格迁移的需求, 提高了风格迁移
的效率和实时性, 同时, 本发明对迁移后的结果
进行重新组合再利用的能力。
权利要求书1页 说明书4页 附图2页
CN 114491775 B
2022.06.21
CN 114491775 B
1.一种元宇宙三维建筑模型风格化迁移方法, 其特 征在于, 该 方法包括:
a1.建筑构件 模型文件预处 理;
a2.建筑构件贴图的风格化迁移;
a3.利用深度学习模型, 学习不同风格的特征, 用该特征将输入的原始二维或三维建筑
构件进行风格 变换, 变换后的二维或三维建筑构件进行纹 理及凹凸贴图替换;
所述a1包括以下步骤:
b1: 使模型的UV连续可展开;
b2: 展开模型纹 理贴图, 并确保其语义连续可识别;
b3: 对纹理贴图进行有重合的切割, 输出切割后的贴图瓦片;
所述a2包括以下步骤:
c1: 使用深度学习模型对切割后贴图瓦片进行风格迁移;
c2: 对风格迁移后的贴图瓦片进行基于深度学习的超分辨 率采样放大至原切割尺寸;
c3: 对放大后的贴图瓦片进行重新 拼接至原纹理贴图尺寸;
所述a3包括以下步骤:
d1: 基于深度学习模型, 根据风格迁移后的纹 理贴图生成凹凸贴图;
d2: 将生成的凹凸贴图和 纹理贴图映射到原建筑构件模型上, 获得风格迁移后的建筑
构件三维模型。
2.根据权利要求1所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 所述深度
学习模型对输入的二 维图片或三 维模型转换成不同的风格, 并保留原始 二维图片或三维模
型风格, 需要提取原 始内容时, 将重新 提取。
3.根据权利要求1所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 所述步骤
b2后进行提取贴图, 然后将提取的贴图进行贴图切割或贴图预处 理。
4.根据权利要求1所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 所述步骤
b3的贴图切割方法是:
e1: 将贴图进行切割为 不同大小的像素点;
e2: 切割时需要考虑每张瓦片涵盖的视野大小, 每张瓦片之间需要有至少50%的重叠,
确保后期的无 缝拼合。
5.根据权利要求4所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 所述贴图
切割后, 通过输入新的文案做引导, 利用深度学习模型将文字风格及内容转换为新的贴图
风格, 并输出新的贴图。
6.根据权利要求4所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 所述像素
点大小分别为512、 1024、 2048。
7.根据权利要求5所述的元宇宙三维建筑模型风格化迁移方法, 其特征在于, 将所述新
的贴图尺寸信息进行分类, 分为1类、 2类、 3类, 将1类尺寸与原始切割尺寸比对, 若1类尺寸
大于原尺 寸, 将自动缩小至原尺 寸至原尺寸; 将2类尺 寸与原始切割尺寸比对, 若2类尺 寸大
于原尺寸, 将自动缩小至原尺寸; 将3类尺寸与原始切割尺寸比对, 若3类尺寸大于原尺寸,
将自动缩小至原 尺寸; 若1类、 2类、 3类尺寸小于原 尺寸, 将自动放大至原 尺寸。权 利 要 求 书 1/1 页
2
CN 114491775 B
2一种元宇宙三维建筑模型风格化迁移 方法
技术领域
[0001]本发明涉及元宇宙技术领域, 具体来说, 涉及一种元宇宙三维建筑模型风格化迁
移方法。
背景技术
[0002]元宇宙的核心思想是为人们提供可实时交互的虚拟世界, 在这样的虚拟世界中,
人们可以以数字化的形式身四处走动, 并与其他用户进行聊天和互动。 建筑是元宇宙虚拟
世界中的基本元素之一, 建筑本身的立体属性和设计方式与3D可视化技术具有天然连接,
在此基础上, 如何对虚拟世界中的建筑立面进行设计和改造, 并提供多样化的艺术效果表
达是目前 学术界和工业界关注的热点。
[0003]近年来兴起的风格化迁移技术是深度学习领域很有创意的工作成果, 它可以将一
幅艺术风格画X的绘画风格巧妙地融入到内容图像Y中, 生成一幅新的图像YX, 生成的YX既
保持内容图像Y的原始图像内容, 例如内容图像是一部汽车, 融合后仍是一部汽车, 不能变
成摩托车, 又要保持风格图像X的特有风格, 比如纹理、 色调、 笔触等。 风格化迁移技术能够
为元宇宙虚拟世界中的建筑生成与改造提供多样化艺术效果, 增强用户的交互性, 为用户
提供对虚拟世界的个性 化、 多样化的体验。
[0004]目前, 将风格化迁移技术应用于建筑设计领域的主要工作包括: 效果图的风格迁
移、 建筑立面的风格迁移、 彩色平面示意图的风格迁移等, 其共同特点是对图像做整体风格
化迁移, 用于元宇宙 虚拟世界的建筑生成与改造时, 表现出一些不足:
[0005]1.现有的风格迁移技术仅限于最终输出图像, 不能对三维数字模型本身进行风格
迁移, 难以满足在虚拟世界中的模型交 互需求。
[0006]2.现有的风格迁移技术每次风格迁移需要根据原图像和目标图像进行单独模型
训练, 极大影响风格迁移的效率和实时性。
[0007]3.现有的风格迁移技术通常是对图像整体而非语义自然理解上的局部进行迁移,
不具备对迁移后的结果进行重新组合再利用的能力。
[0008]针对相关技 术中的问题, 目前尚未提出有效的解决方案 。
发明内容
[0009]本发明的目的在于提供一种元宇宙三维建筑模型风格化迁移方法, 以解决上述背
景技术中提出的问题。
[0010]为实现上述目的, 本发明提供如下技 术方案:
[0011]一种元宇宙三维建筑模型风格化迁移方法, 该 方法包括:
[0012]a1.建筑构件 模型文件预处 理;
[0013]a2.建筑构件贴图的风格化迁移;
[0014]a3.利用深度学习模型, 学习不同风格的特征, 用该特征将输入的原始二维或三维
建筑构件进行风格 变换, 变换后的二维或三维建筑构件进行纹 理及凹凸贴图替换。说 明 书 1/4 页
3
CN 114491775 B
3
专利 一种元宇宙三维建筑模型风格化迁移方法
文档预览
中文文档
8 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
温馨提示:本文档共8页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 SC 于 2024-02-18 22:33:14上传分享