-
公开(公告)号：CN114119838B
公开(公告)日：2022-07-22
申请号：CN202210081290.1
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种体素模型与图像生成方法、设备及存储介质，在本申请实施例中，提出一种通过体素模型对物体进行隐式3D表达的方案，相比于采用MLP的神经网络，本申请实施例的体素模型是一种离散神经辐射场，其包括多个体素，每个体素具有能够对落入该体素内的空间点进行隐式3D表达的体素信息，基于该体素模型，通过对体素模型进行体素信息的查询即可实现对物体的隐式3D表达，无需经过多层神经网络的前向计算，有利于提高基于对物体的隐式3D表达进行三维重建时的重建效率，进而可提高新视角图像的合成效率，对物体的隐式3D表达可应用于任何新视角图像合成场景中，不再受应用场景对合成效率要求的限制。
-
公开(公告)号：CN114119839B
公开(公告)日：2022-07-01
申请号：CN202210081291.6
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种三维模型重建与图像生成方法、设备以及存储介质。在本申请实施例中，以包含目标物体的多张原始图像为基础分别进行基于神经网络的三维重建和传统的三维重建，得到初始隐式3D表征模型和显式三维模型；基于显式三维模型进行随机视线和平均视角的生成，通过产生随机视线并以随机视线对应的平均视角信息代替其真实视角信息的方式，利用随机视线及其对应的平均视角信息增强视线数据，基于增强后的视线数据继续进行基于神经网络的三维重建，可以得到对视线具有较强鲁棒性的隐式3D表征模型，大大提升基于该隐式3D表征模型合成不同视角图像时的鲁棒性。
-
公开(公告)号：CN114119849B
公开(公告)日：2022-06-24
申请号：CN202210080688.3
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种三维场景渲染方法、设备以及存储介质。在本申请实施例中，获取目标物体对应的显式三维模型和隐式三维表征模型，一方面基于显式三维模型对目标物体进行三维场景渲染，可以得到真实光照信息，一方面基于隐式三维表征模型针对目标物体进行视图合成，得到纹理信息更优质的视角图像；之后将真实光照信息迁移到视角图像上，实现基于显式三维模型的场景渲染与基于隐式三维表征模型的视图合成的结合，进而得到最终二维场景图像。其中，将基于显式三维模型的场景渲染与基于隐式三维表征模型的视图合成相结合，提高场景图像的质量，降低图像的失真度，充分发挥隐式3D表征的优势。
-
公开(公告)号：CN114119838A
公开(公告)日：2022-03-01
申请号：CN202210081290.1
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种体素模型与图像生成方法、设备及存储介质，在本申请实施例中，提出一种通过体素模型对物体进行隐式3D表达的方案，相比于采用MLP的神经网络，本申请实施例的体素模型是一种离散神经辐射场，其包括多个体素，每个体素具有能够对落入该体素内的空间点进行隐式3D表达的体素信息，基于该体素模型，通过对体素模型进行体素信息的查询即可实现对物体的隐式3D表达，无需经过多层神经网络的前向计算，有利于提高基于对物体的隐式3D表达进行三维重建时的重建效率，进而可提高新视角图像的合成效率，对物体的隐式3D表达可应用于任何新视角图像合成场景中，不再受应用场景对合成效率要求的限制。
-
公开(公告)号：CN114119839A
公开(公告)日：2022-03-01
申请号：CN202210081291.6
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种三维模型重建与图像生成方法、设备以及存储介质。在本申请实施例中，以包含目标物体的多张原始图像为基础分别进行基于神经网络的三维重建和传统的三维重建，得到初始隐式3D表征模型和显式三维模型；基于显式三维模型进行随机视线和平均视角的生成，通过产生随机视线并以随机视线对应的平均视角信息代替其真实视角信息的方式，利用随机视线及其对应的平均视角信息增强视线数据，基于增强后的视线数据继续进行基于神经网络的三维重建，可以得到对视线具有较强鲁棒性的隐式3D表征模型，大大提升基于该隐式3D表征模型合成不同视角图像时的鲁棒性。
-
公开(公告)号：CN114119849A
公开(公告)日：2022-03-01
申请号：CN202210080688.3
申请日：2022-01-24
申请人： 阿里巴巴(中国)有限公司
摘要： 本申请实施例提供一种三维场景渲染方法、设备以及存储介质。在本申请实施例中，获取目标物体对应的显式三维模型和隐式三维表征模型，一方面基于显式三维模型对目标物体进行三维场景渲染，可以得到真实光照信息，一方面基于隐式三维表征模型针对目标物体进行视图合成，得到纹理信息更优质的视角图像；之后将真实光照信息迁移到视角图像上，实现基于显式三维模型的场景渲染与基于隐式三维表征模型的视图合成的结合，进而得到最终二维场景图像。其中，将基于显式三维模型的场景渲染与基于隐式三维表征模型的视图合成相结合，提高场景图像的质量，降低图像的失真度，充分发挥隐式3D表征的优势。
-
-
-
-
-
搜索结果
6 条记录 (耗时 0.03 秒)
