standard library
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211253518.7 (22)申请日 2022.10.13 (71)申请人 山东科技大 学 地址 266590 山东省青岛市黄岛区前湾港 路579号 (72)发明人 王海霞 刘强 舒焕洲 卢晓 张治国 张洋涌 陈禹沁 (74)专利代理 机构 济南圣达知识产权代理有限 公司 372 21 专利代理师 闫圣娟 (51)Int.Cl. G06T 17/00(2006.01) G06T 19/20(2011.01) G06T 3/40(2006.01) G06T 7/11(2017.01)G06T 7/41(2017.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种针对低纹理区域精确表示的场景表达 方法及系统 (57)摘要 本公开涉及计算机视觉技术领域, 提出了一 种针对低纹理区域精确表示的场景表达方法及 系统, 包括如下步骤: 获取待识别场景区域中相 机的相机参数、 目标视图图像坐标和初始深度; 将获取的数据, 输入至训练好的超像素引导场景 表示网络进行场景表达, 得到合成的场景目标视 图; 所述超像素引导场景表示网络包括场景表示 网络和超像素正则化模块, 在场景表 示网络的像 素生成器前, 设置超像素正则化模块, 将整个场 景分割成多个局部区域, 然后利用平滑损失函 数, 优化局部区域的场景表示, 训练超像素引导 场景表示网络。 本公开的方法能够解决场景表达 模型在低纹理区域表示不精确问题, 来提高场景 表示模型的3D结构表达能力。 权利要求书2页 说明书6页 附图1页 CN 115526992 A 2022.12.27 CN 115526992 A 1.一种针对低纹 理区域精确表示的场景表达方法, 其特 征在于, 包括如下步骤: 获取待识别场景区域中相机的相机参数, 目标视图 图像坐标和初始深度; 将获取的数据, 输入至训练好的超像素引导场景表示网络进行场景表达, 得到合成的 场景目标视图; 所述超像素引导场景表示网络包括场景表示网络和超像素正则化模块, 在场景表示网 络的像素生成器前, 设置超像素正则化模块, 将整个场景分割成多个局部区域, 然后利用平 滑损失函数, 优化局部区域的场景表 示, 计算正则化值作为网络的一项损失函数, 与场景表 示网络的平衡二维图像监督损失Ldepth以及像素损失LColor构建总损失函数, 训练超像素引 导场景表示网络 。 2.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于: 所 述相机参数包括相机位置与姿态数据。 3.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于: 场 景表示网络为SRNs网络、 NeRF网络或者 LFN网络。 4.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于, 合 成场景目标视图, 包括如下步骤: 将获取的相机参数、 目标视 图图像坐标和初始深度, 通过相机矩阵转换为三维世界坐 标; 将转换后的三维世界坐标, 输入至场景表示 函数得到场景表示向量; 将得到的场景表示向量输入到可微光线推进模块进行迭代, 并更新三维世界坐标, 按 照设定次数的迭代后得到最终场景表示向量; 最终场景表示向量输入至像素生成器解码得到目标视图。 5.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于: 本 实施例中, 场景表示 函数具体为: 通过多层神经网络拟合得到; 或者, 可微光线推进模块采用光线推进长短期记忆网络, 以场景表示向量vi和上次循 环隐藏状态作为输入, 经过网络运算得到新的 隐藏状态并作为光线推进距离δ, 上一循环的 深度值di‑1与光线推进距离 δ相加则得到更新的深度值d。 6.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于: 超 像素引导场景表示网络训练方法, 包括如下步骤: 构建训练数据集, 数据集数据包括场景真实图像, 以及场景真实图像的每个目标视 图 对应的相机参数、 视图 图像坐标和初始深度; 获取训练数据集中的相机参数, 以及目标视 图图像坐标和初始深度, 通过相机矩阵转 换为三维世界坐标x; 将转换后的三维世界坐标x, 输入至场景表示 函数Φ(x)得到场景表示向量vi; 将得到的场景表示向量vi输入到可微光线推进模块进行迭代, 并更新三维世界坐标x, 按照设定次数n的迭代后得到最终场景表示向量vn; 最终场景表示向量vn输入至像素生成器解码得到目标视图 利用场景表示 向量vn、 真实图像I以及由真实图像生成的超像素掩膜M, 得到正则化值, 作为一项损失函数, 计算总损失函数值;权 利 要 求 书 1/2 页 2 CN 115526992 A 2根据计算的总损失函数值, 进行反向传播, 不断迭代更新网络权重, 最终达到最终的精 确表达, 得到训练好的超像素引导场景表示网络 。 7.如权利要求1所述的一种针对低纹理区域精确 表示的场景表达方法, 其特征在于: 给 定目标视图的相机参数包括相机内参和相机姿态; 或者, 总损失函数值为的平衡二维图像监督损失Ldepth、 像素损失LColor以及超像素正则 化模块的平 滑约束损失函数LSG‑v的加权和。 8.一种针对低纹 理区域精确表示的场景表达系统, 其特 征在于, 包括: 数据获取模块: 被配置为用于获取待识别场景区域中相机的相机参数、 目标视 图图像 坐标和初始深度; 场景表达模块: 被配置为用于将获取的数据, 输入至训练好的超像素引导场景表示网 络进行场景表达, 得到合成的场景目标视图; 所述超像素引导场景表示网络包括场景表示网络和超像素正则化模块, 在场景表示网 络的像素生成器前, 设置超像素正则化模块, 将整个场景分割成多个局部区域, 然后利用平 滑损失函数, 优化局部区域的场景表 示, 计算正则化值作为网络的一项损失函数, 与场景表 示网络的平衡二维图像监督损失Ldepth以及像素损失LColor构建总损失函数, 训练超像素引 导场景表示网络 。 9.一种电子设备, 其特征在于, 包括存储器和处理器以及存储在存储器上并在处理器 上运行的计算机指 令, 所述计算机指 令被处理器运行时, 完成权利要求 1‑7任一项方法所述 的步骤。 10.一种计算机可读存储介质, 其特征在于, 用于存储计算机指令, 所述计算机指令被 处理器执行时, 完成权利要求1 ‑7任一项方法所述的步骤。权 利 要 求 书 2/2 页 3 CN 115526992 A 3
专利 一种针对低纹理区域精确表示的场景表达方法及系统
文档预览
中文文档
10 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共10页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-18 22:24:40
上传分享
举报
下载
原文档
(691.9 KB)
分享
友情链接
T-CSAE 76—2018 纯电动汽车再生制动能量回收效能 快速评价及试验方法.pdf
GB-T 39590.1-2020 机器人可靠性 第1部分:通用导则.pdf
ISO 21511 2018 Work breakdown structures for project and programme management.pdf
T-ZSX 3—2020 儿童友好社区建设规范.pdf
艾瑞咨询 中国医疗信息化行业研究报告 2022.pdf
GB-T 42450-2023 信息技术 大数据 数据资源规划.pdf
T-SISTB 006—2021 现代物业管理评价指标体系1.0.pdf
tc260 汽车电子网络安全标准化白皮书 2018.pdf
GB-T 4553-2016 工业硝酸钠.pdf
ISO IEC 27005-2022 信息安全、 网络安全和隐私保护-信息安全风险管理指南.pdf
T-CSAE 284.2—2022 自动驾驶乘用车 线控底盘性能要求及试验方法 第2部分:制动系统.pdf
GB-T 35965.1-2018 应急信息交互协议 第1部分:预警信息.pdf
DB44-T 2389-2022 计量检测数据与结果数字化处理系统技术要求 广东省.pdf
GB/T 21709.3-2021 针灸技术操作规范 第3部分:耳针.pdf
GB-T 32917-2016 信息安全技术 WEB应用防火墙安全技术要求与测试评价方法.pdf
YD-T 4011-2022 5G网络管理技术要求 总体要求.pdf
GB-T 39559.1-2020 城市轨道交通设施运营监测技术规范 第1部分:总则.pdf
GA-T 1390.5-2017 信息安全技术 网络安全等级保护基本要求 第5部门 工业控制系统安全扩展要求.pdf
思度安全-DSMM-021 存储媒体安全管理规范V1.0.pdf
GB-T 41626-2022 动物腧穴名称与定位 马属动物.pdf
1
/
10
评价文档
赞助2.5元 点击下载(691.9 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。