基于单张RGB图像实现不同人体重建模型的融合方法

文档序号:36268513发布日期:2023-12-06 17:11阅读:来源:国知局

技术特征:

1.基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:包括步骤s100:标定模型迁移与融合区域:将两个不同重建方法得到的隐式表达网络通过marching cubes算法网格化,获得空间及空间分辨率对齐的三维人体重建模型;基于单张rgb图输入两个三维人体隐式重建模型;通过渲染方式获得每个模型像素对齐的空间深度图,并计算对应的空间厚度图,通过厚度图对比获得两个模型的相同区域和不同区域;

2.根据权利要求1所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s100包括:

3.根据权利要求2所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s110中,第一模型为icon重建方法获得的三维人体隐式重建模型;第二模型为基于pifu重建方法获得的三维人体隐式重建模型。

4.根据权利要求2所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s120中,v值采用0.5;0.5作为重建表面,大于0.5视为在重建表面外,小于0.5视为在重建人体表面的内部。

5.根据权利要求2所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s150包括:

6.根据权利要求1所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s200包括:

7.根据权利要求6所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s210中,训练可见面深度图网络与不可见面深度图网络时,特征匹配损失为:

8.根据权利要求6所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s230中,计算第一模型的空间平均厚度ta,计算深度预测图与第一模型对应区域的平均厚度tad,第一模型缺失部分的预测厚度tal,通过比例计算获得第二模型迁移至第一模型部分的厚度tb2a,将第二模型对应部分的厚度转化为tb2a。

9.根据权利要求1所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s300包括:将第二模型保留部分和第二模型迁移部分进行插值计算,插值公式为:

10.根据权利要求1所述的基于单张rgb图像实现不同人体重建模型的融合方法,其特征在于:步骤s400包括:


技术总结
本发明公开了一种基于单张RGB图像实现不同人体重建模型的融合方法,方法包括:首先将两个不同重建方法得到的隐式表达网络通过Marching Cubs算法网格化,获得空间及空间分辨率对齐的三维人体重建模型,通过渲染方式获得每个重建模型的像素对齐深度图,并计算空间z的厚度,通过厚度图对比获得两个模型的相同区域和不同区域;使用人体模型数据集渲染出的RGB图像和深度图像,训练得到人物可见面和不可见面的深度图网络,使用RGB图像输入网络得到预测的可见面和不可见面深度图,确定z空间位置并使用厚度放缩算法对齐不同模型的z空间厚度;最后使用边缘距离标记算法将两个模型的不同区域与相同区域在边界处进行插值融合。本发明提高重建精度。

技术研发人员:林兆骥,赵婕妤,姚莉
受保护的技术使用者:三江学院
技术研发日:
技术公布日:2024/1/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1