-
公开(公告)号:CN117274344B
公开(公告)日:2024-02-06
申请号:CN202311558857.0
申请日:2023-11-22
申请人: 北京渲光科技有限公司
摘要: 本发明公开了一种真实材质纹理的模型训练方法、纹理合成及映射方法,包括获取三维模型,并对所述三维模型进行处理以分离出所述三维模型包含的基本形状和真实三维材质;对所述基本形状和真实三维材质进行处理,以确定真实三维材质上的采样点、所述采样点在所述基本形状上的投影点,以及预设的参数;基于预设的损失函数,利用所述采样点、所述投影点以及所述预设的参数,对预建立的神经网络模型进行训练。本申请通过神经网络模型能够实现在处理具有层次结构纹理时具有较好的效果,进而克服了相关技术无法较好处理具有层次结构的纹理,进(56)对比文件康豆.点云的三维重建与纹理映射《.中国优秀硕士学位论文全文数据库 信息科技辑》.2021,全文.Kai Zhang et.al.IRON: InverseRendering by Optimizing Neural SDFs andMaterials From Photometric Images.《Proceedings of the IEEE/CVF Conferenceon Computer Vision and PatternRecognition (CVPR)》.2022,5565-5574.
-
公开(公告)号:CN117036569B
公开(公告)日:2024-01-30
申请号:CN202311290084.2
申请日:2023-10-08
申请人: 北京渲光科技有限公司
摘要: 本公开实施例提供了三维模型颜色生成网络训练方法、颜色生成方法及装置,基于三维模型顶点颜色与如下参量之间的函数关系构建用于三维模型颜色生成的神经网络模型:能够生成三维模型的图片中像素颜色、像素位置、与像素对应的三维模型顶点的深度;获取用于神经网络训练的待训三维模型,以及能够生成待训三维模型的待训图片;将待训图片中像素颜色、像素位置、以及与像素对应的所述待训三维模型顶点的深度作为神经网络的输入,将待训三维模型的真实顶点颜色作为标注值,对神经网络进行训练,得到训练后的三维模型颜色生成网络。解决了现有技术中三维重建时生成的三维形状表面颜色
-
公开(公告)号:CN117333637A
公开(公告)日:2024-01-02
申请号:CN202311631762.7
申请日:2023-12-01
申请人: 北京渲光科技有限公司
IPC分类号: G06T17/20 , G06T17/10 , G06T15/00 , G06T15/04 , G06T15/50 , G06T15/60 , G06N3/0475 , G06N3/048 , G06N3/08
摘要: 本申请公开了一种三维场景的建模及渲染方法、装置及设备,涉及三维建模技术领域,能够实现三维场景的准确建模,高质量还原3D模型的形状、外观和光照。其中方法包括:获取待建模场景图片经过3D空间采样得到的第一采样点,根据第一采样点的属性信息,利用预先训练的模型网络对待建模场景图片进行信息提取,得到第二采样点的体密度以及第二采样点在不同材质维度上的参数信息,根据第二采样点在不同材质维度上的参数信息,利用预先训练的颜色生成网络对待建模场景图片进行颜色提取,得到第二采样点的颜色信息,根据第二采样点的体密度、第二采样点在不同材质维度上的参数信息以及第二采样点的颜色信息,确定待建模场景图片的三维场景模型数据。
-
公开(公告)号:CN117274473A
公开(公告)日:2023-12-22
申请号:CN202311551123.X
申请日:2023-11-21
申请人: 北京渲光科技有限公司
发明人: 方顺 , 张志恒 , 崔铭 , 冯星 , 杨峰峰 , 王月 , 乔磊 , 孙思远 , 汪成峰 , 胡梓楠 , 李荣华 , 刘昊卿 , 吕艳娜 , 房超 , 王海龙 , 温思远 , 米凌峰 , 罗文锋 , 马忠莉 , 卢文坤
摘要: 本申请提供了一种多重散射实时渲染的方法、装置及电子设备,该方法包括:获取待渲染原始三维模型在多个角度的模型图片;至少将所述多个角度的模型图片输入至目标多重散射渲染模型,得到多重散射效果图片。本申请的一些实施例可以对原始三维模型的多重散射实时渲染。
-
公开(公告)号:CN116993924B
公开(公告)日:2023-12-15
申请号:CN202311234506.4
申请日:2023-09-25
申请人: 北京渲光科技有限公司
发明人: 方顺 , 孙思远 , 冯星 , 崔铭 , 杨峰峰 , 韦建伟 , 胡梓楠 , 乔磊 , 张造时 , 汪成峰 , 穆子杰 , 刘锦 , 王月 , 熊宏康 , 房超 , 李荣华 , 单仝 , 张志恒
摘要: 本申请公开了一种三维场景建模方法及装置、存储介质、计算机设备,该方法包括:对场景图片进行前景裁剪得到至少一个前景裁剪图,基于所述前景裁剪图和所述场景图片,确定所述场景图片对应的前景特征向量和背景特征向量,预测所述背景特征向量对应的背景物体模型数据,预测每个所述前景特征向量各自对应的前景物体模型数据;分别预测每张所述前景裁剪图对应的前景物体局部姿态,基于所述前景裁剪图在所述场景图片中的位置以及所述前景物体局部姿态,确定前景物体全局姿态;根据所述前景物体全局姿态对所述前景物体模型数据进行位姿变换,基于所述背景物体模型数据和位姿变换后的前景物体模型数据,确定所述场景图片对应的三维场景模型数据。
-
公开(公告)号:CN117173315A
公开(公告)日:2023-12-05
申请号:CN202311452552.1
申请日:2023-11-03
申请人: 北京渲光科技有限公司
发明人: 方顺 , 杨峰峰 , 崔铭 , 冯星 , 张志恒 , 韦建伟 , 张造时 , 王月 , 乔磊 , 孙思远 , 裴瑶 , 张柏鹏 , 高鹏蕊 , 吕艳娜 , 贺斌 , 周昊 , 闫茹愉 , 王朝鹏 , 杨子剑 , 徐杰
摘要: 本发明属于人工智能、计算机视觉、计算机图形学领域,具体涉及一种基于神经辐射场的无界场景实时渲染方法、系统及设备,旨在解决现有NeRF方法的特征分配存在浪费、模型训练时间长、仅能处理有界场景的渲染以及存在控制流分歧的问题。本发明方法包括:采集无边场景中任意但已知位姿的图像,作为输入图像;对输入图像中点进行标准化,标准化后,结合预构建的哈希索引表,进行位置编码;将位置编码后的特征向量输入预构建的属性预测网络,得到输入图像中的点的体密度及RGB颜色,进而得到新视角渲染后的图像。本发明大大减少了内存消耗,缩减了模型的训练时长、通过神经网络学习哈希值处理避免控制流分歧并实现了无界场景的渲染。
-
公开(公告)号:CN117036569A
公开(公告)日:2023-11-10
申请号:CN202311290084.2
申请日:2023-10-08
申请人: 北京渲光科技有限公司
摘要: 本公开实施例提供了三维模型颜色生成网络训练方法、颜色生成方法及装置,基于三维模型顶点颜色与如下参量之间的函数关系构建用于三维模型颜色生成的神经网络模型:能够生成三维模型的图片中像素颜色、像素位置、与像素对应的三维模型顶点的深度;获取用于神经网络训练的待训三维模型,以及能够生成待训三维模型的待训图片;将待训图片中像素颜色、像素位置、以及与像素对应的所述待训三维模型顶点的深度作为神经网络的输入,将待训三维模型的真实顶点颜色作为标注值,对神经网络进行训练,得到训练后的三维模型颜色生成网络。解决了现有技术中三维重建时生成的三维形状表面颜色失真的问题。
-
公开(公告)号:CN116450112A
公开(公告)日:2023-07-18
申请号:CN202310371892.5
申请日:2023-04-07
申请人: 北京渲光科技有限公司
IPC分类号: G06F8/33
摘要: 本申请提供了一种使用序列化的属性编辑处理方法和装置、设备及介质,涉及软件技术领域。该方法通过对象,生成对象的中间对象;通过对象中的一个或多个变量,创建生成各个变量的中间属性;本申请实施例采用中间属性类型代替变量名传递变量信息,只要是对象中的变量,中间属性都可以进行表示和修改;同时,封装了访问接口和修改接口,使得二次开发人员可以在编辑器类中安全、便捷地对变量进行编辑操作,实现对对象的属性的编辑。
-
公开(公告)号:CN116188668B
公开(公告)日:2023-07-07
申请号:CN202310458116.9
申请日:2023-04-25
申请人: 北京渲光科技有限公司
摘要: 本申请实施例提供一种基于IOS平台的阴影渲染的方法、介质及电子设备,所述方法包括:根据目标原则获取光源透视投影矩阵和光源视觉矩阵,其中,所述目标原则为使场景中距离视点越近的位置在阴影映射纹理中的投影位置对应的光栅化比率控制参数值越大;根据所述光源透视投影矩阵和所述光源视觉矩阵完成阴影渲染。本申请的一些实施例基于IOS平台上提出了的基于光栅化比率映射和光照方向重指定的三维阴影渲染方法,可以在得到相同阴影映射精度的前提下,有效减少使用的内存和计算开销。
-
公开(公告)号:CN116109758B
公开(公告)日:2023-06-16
申请号:CN202310364610.9
申请日:2023-04-07
申请人: 北京渲光科技有限公司
摘要: 本申请的一些实施例提供了一种光源投影位置定位、场景渲染的方法及装置,该光源投影位置定位的方法包括:获取阴影层级区域对应的光源初始位置;将投影矫正信息记录的光源信息与当前光源信息进行对比,确定投影矫正辅助信息;基于所述投影矫正辅助信息对所述光源初始位置进行投影矫正,获取所述光源投影位置,以防止在场景渲染时出现阴影边缘抖动。本申请的一些实施例可以实现对光源投影位置的重新定位,可以解决光源位置发生变化时阴影边缘的抖动问题。
-
-
-
-
-
-
-
-
-