公开(公告)号：CN118071909A

公开(公告)日：2024-05-24

申请号：CN202410242596.X

申请日：2024-03-04

申请人： 浙江大学

发明人： 周昆 ,  叶可扬 ,  侯启明

IPC分类号： G06T15/00 ,  G06T15/50

摘要： 本发明公开了一种基于延迟反射计算的高斯溅射方法。该方法利用三维高斯作为场景表达，并将每个三维高斯的最短轴方向视为其法向；对于给定视角，首先利用高斯溅射将颜色、法向与反射强度渲染为屏幕空间下的基本颜色图、法向图与反射强度图；再利用法向图计算每个像素的反射方向，并在一张环境光照图中查询对应的反射颜色，得到反射颜色图。反射颜色图与基本颜色图以反射强度图作为权重逐像素线性混合得到最终的渲染结果。与当前最先进的方法相比，本发明能合成出更高质量的镜面反射效果，并能更准确估计反射体表面法向与环境光照，且在训练时间与实时渲染速度上有着显著优势。

公开(公告)号：CN117671108A

公开(公告)日：2024-03-08

申请号：CN202311678774.5

申请日：2023-12-07

申请人： 浙江大学

发明人： 周昆 ,  叶可扬 ,  邵天甲 ,  翁彦琳

IPC分类号： G06T15/00 ,  G06T7/73 ,  G06T17/00

摘要： 本发明公布了一种基于三维高斯的动态人体建模方法。本方法先给定一段多视角的人体视频，为了针对动态人体外观进行修正与变换，对每个高斯附加上了一个隐编码与一组混合权重；将隐编码与目标姿势被输入到一个MLP以在规范空间下修正高斯去捕捉在目标姿态下的外观变化。经修正的高斯通过它们的混合权重以线性混合蒙皮(Linear Blend Skinning，LBS)的方式被变换到目标姿势。最后，在新视角或新姿势下的逼真人体图像可以通过高斯泼溅(Gaussian Splatting)的方式实时渲染。与目前基于隐式神经场(Neural Radiance Field，NeRF)的方法相比，本发明的三维高斯表达可以更好的捕捉到高频细节，并且达到最优的渲染性能。

公开(公告)号：CN114549721A

公开(公告)日：2022-05-27

申请号：CN202210176583.8

申请日：2022-02-25

申请人： 浙江大学

发明人： 潘曲利 ,  叶可扬 ,  任重

IPC分类号： G06T15/00 ,  G06T15/06 ,  G06T15/50 ,  G06N3/04 ,  G06N3/08

摘要： 本发明公开了一种时域稳定的毛发点云神经渲染方法，本发明针对现有基于点云的神经渲染网络无法渲染具有时域稳定性的高质量毛发这一问题，提出了深度剥离和时域稳定性增强网络，通过对输入点云模型的分层投影，获取不同分层的特征信息，将结果进行融合以适应毛发半透明特性；将训练好的结果输入到时域稳定性增强网络中，利用相邻帧间点云的重投影得到当前帧和前几帧的依赖关系，生成当前帧的最终结果，保证了训练结果的时域稳定性。本发明通过局部光照的信息推断出全局光照的结果，可以同时保证渲染质量和渲染速度。克服了传统方法使用光线追踪等全局光照算法渲染毛发十分耗时的不足。