公开(公告)号：CN113160296A

公开(公告)日：2021-07-23

申请号：CN202110348718.X

申请日：2021-03-31

申请人： 清华大学

发明人： 张松海 ,  何煜 ,  陈晓松 ,  刘应天 ,  胡事民

IPC分类号： G06T7/55 ,  G06T15/00 ,  G06T17/20

摘要： 本发明提供一种基于可微渲染的振动液滴三维重建方法及装置，该方法包括：根据输入的相机参数建立可微的渲染模型；将输入的多视角液滴振动视频转换为同一时刻的多视角图像，对所述多视角图像做边缘提取；初始化液滴的三维模型，通过可微渲染模型得到对应的渲染图像；计算所述渲染图像和所述多视角图像间的损失函数值，反向传播到液滴的三维模型参数中，进行模型参数更新。该方法考虑到了液滴特征点不明显和振动快速的特点，用可微渲染结合物理模型描述，能够使液滴的三维模型在多个视角下和拍摄图像一致，达到了较快的重建速度和准确的重建精度。

公开(公告)号：CN113160296B

公开(公告)日：2023-06-06

申请号：CN202110348718.X

申请日：2021-03-31

申请人： 清华大学

发明人： 张松海 ,  何煜 ,  陈晓松 ,  刘应天 ,  胡事民

IPC分类号： G06T7/55 ,  G06T15/00 ,  G06T17/20

摘要： 本发明提供一种基于可微渲染的振动液滴三维重建方法及装置，该方法包括：根据输入的相机参数建立可微的渲染模型；将输入的多视角液滴振动视频转换为同一时刻的多视角图像，对所述多视角图像做边缘提取；初始化液滴的三维模型，通过可微渲染模型得到对应的渲染图像；计算所述渲染图像和所述多视角图像间的损失函数值，反向传播到液滴的三维模型参数中，进行模型参数更新。该方法考虑到了液滴特征点不明显和振动快速的特点，用可微渲染结合物理模型描述，能够使液滴的三维模型在多个视角下和拍摄图像一致，达到了较快的重建速度和准确的重建精度。