公开(公告)号：CN119559329A

公开(公告)日：2025-03-04

申请号：CN202411646473.9

申请日：2024-11-18

Applicant: 杭州电子科技大学

Inventor： 姚扬 ,  郑博仑 ,  张桦

IPC: G06T17/00 ,  G06T15/00 ,  G06N3/0499 ,  G06N3/09

Abstract: 本发明公开了一种基于权重掩码策略的隐式表面人体建模方法，首先基于2D人体照片生成隐式表达，然后将生成的空间点的隐式表达输入到渲染器中，渲染人体预测图像和预测掩码。优化人体特殊部位的表面,根据损失函数监督并训练模型；最后根据得到的模型进行人体表面的生成。本发明方法通过在模型的不同区域引入可调控的权重掩码，使得对人体各部分细节的刻画更加精准，尤其是在曲率变化较大的部位，如面部、关节等区域，可以更好地捕捉微小的轮廓和形状变化。通过权重掩码策略，能够对模型的复杂区域进行更细致的优化，从而避免了在曲面转换时的扭曲、失真或拉伸现象。

公开(公告)号：CN116823794A

公开(公告)日：2023-09-29

申请号：CN202310853093.1

申请日：2023-07-12

Applicant: 杭州电子科技大学

Inventor： 张桦 ,  沈卓南 ,  郑博仑 ,  姚扬 ,  张灵均 ,  王慕薇 ,  罗逸章 ,  郭紫俐

IPC: G06T7/00 ,  G06T5/00 ,  G06V10/766 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/084 ,  G06N3/0985

Abstract: 本发明公开了一种基于多域失真学习的无参考图像质量评价方法，首先构建基于多域失真学习的无参考图像质量评价模型；然后对输入的失真图像进行退化修复；完成多域失真学习，得到对应的频率特征；再进行多尺度语义特征提取和边缘信息提取；最后根据获得的将多尺度频率特征、多尺度语义特征和图像边缘信息，实现特征融合与质量回归。本发明提出使用多域失真学习方法，帮助模型识别图像信息中的各种噪声，并有效地提高图像质量。本发明在图像语义特征的基础之上引入频域信息来辅助预测质量分数。

公开(公告)号：CN119206089A

公开(公告)日：2024-12-27

申请号：CN202411688325.3

申请日：2024-11-25

Applicant: 杭州电子科技大学 ,  新华智云科技有限公司 ,  浙江科技大学

Inventor： 姚扬 ,  郑博仑 ,  王灿进 ,  陈芳妮 ,  张仟瑜 ,  张桦

IPC: G06T17/00 ,  G06T13/40

Abstract: 本发明公开了一种基于圆锥射线神经辐射场的人体三维重建方法，首先进行人体视频图像预处理；然后初始化圆锥射线并采样,得到采样点并利用多维高斯函数来表达圆锥截面；之后初始化潜在代码和SMPL人体模型；进行SMPL人体模型潜在代码扩散，SMPL人体模型密度和颜色回归；最后通过SMPL人体模型体绘制进行对人体的三维重建。本发明引入了圆锥射线的概念，能够捕捉到更多的光线信息。这样可以更准确地表达重建模型的整体颜色，使得重建的人体模型在颜色上更真实、更自然。能够更好地处理边缘过渡问题，减少锯齿现象，使得重建的人体模型在边缘轮廓上更加平滑、细腻，提高了视觉质量。

公开(公告)号：CN117911609A

公开(公告)日：2024-04-19

申请号：CN202311730771.1

申请日：2023-12-15

Applicant: 杭州电子科技大学

Inventor： 郑博仑 ,  姚扬 ,  朱尊杰 ,  李宗鹏 ,  张桦

IPC: G06T17/00 ,  G06T15/00 ,  G06V10/26 ,  G06V20/70 ,  G06V40/10 ,  G06V40/20 ,  G06V20/40 ,  G06N3/0464 ,  G06N3/0495

Abstract: 本发明公开了一种基于神经辐射场的三维手部建模方法，包括步骤如下：步骤(1)、通过双手手部分离模型进行双手模态分割；步骤(2)、通过手部去遮挡和移除模块获得单手图片；步骤(3)、单手蒙皮模型的结构化潜码；步骤(4)、单手蒙皮模型潜在代码扩散；步骤(5)、单手蒙皮模型手部密度和颜色回归；步骤(6)、对单手蒙皮模型进行手部体绘制得到双手手部模型。本发明使用了一种用于动态人体的新型隐式神经表示，这使本发明方法能够有效地合并视频帧上的观察。本发明方法可以在各种视点和不同级别的手间遮挡下获得高质量的重建性能。