一种基于双目视觉和扩散模型的三维重建方法及装置

    公开(公告)号:CN116503553A

    公开(公告)日:2023-07-28

    申请号:CN202310436658.6

    申请日:2023-04-21

    申请人: 淮阴工学院

    摘要: 本发明公开了一种基于双目视觉和扩散模型的三维重建方法及装置,三维重建方法包括双目相机标定;利用标定好的双目相机采集待重建物体图像,得到左目相机拍摄图像Imagel和Imager;对图像Imagel和Imager进行畸变矫正和立体校正处理,得到图像Il和Ir;对图像Il和Ir采用半全局块匹配算法计算视差值,构建视差图,并计算出粗略深度图Imaged;构建扩散模型,利用训练数据集对扩散模型进行训练;将粗略深度图Imaged输入到预训练好的扩散模型Modeld中,得到精确深度图Id;根据精确深度图Id,通过坐标系变换得到三维点云模型。本发明三维重建效率高,效果好。

    一种杏鲍菇菌包基质自动切除方法及装置

    公开(公告)号:CN116869188A

    公开(公告)日:2023-10-13

    申请号:CN202310928084.4

    申请日:2023-07-26

    申请人: 淮阴工学院

    IPC分类号: A23N15/04

    摘要: 本发明公开了一种杏鲍菇菌包基质自动切除方法及装置,利用杏鲍菇基质区域比较粗糙,在光照条件下容易产生较多的亮点,确定菌包基质区域位置,从而确定菌包基质的切割线,根据杏鲍菇菌包基质自动切除方法算出需要切割的长度为L,主控模块续获取相机传输来的图像信息并计算测量杏鲍菇最右端超出切刀所在线的长度L1,当L1=L时,主控模块控制切刀,将菌包基质切除,以避免在切除菌包基质时,将杏鲍菇可食用的部分切除,减少浪费。

    单视图三维模型重建方法、设备及存储介质

    公开(公告)号:CN116824058A

    公开(公告)日:2023-09-29

    申请号:CN202310802924.2

    申请日:2023-06-30

    申请人: 淮阴工学院

    摘要: 本发明公开了一种单视图三维模型重建方法、设备及存储介质,方法包括以下步骤:(1)获取目标物体的二维图像,并将二维图像预处理为矢量嵌入图片序列;(2)将矢量嵌入图片序列输入训练好的二维特征提取网络中,得到二维特征图,其中,所述二维特征提取网络包括依次连接的图像嵌入层、第一协同自注意力阶段、第二协同自注意力阶段、过渡层、第一全局自注意力阶段、第二全局自注意力阶段和平均池化层;(3)将二维特征图输入训练好的三维特征提取网络中,得到三维特征图;(4)将三维特征图输入训练好的三维体素提取网络中,生成三维体素;(5)根据生成的三维体素进行三维模型重建。本发明成本低、效率高、重建效果好。

    一种基于深度学习的多视角三维重建方法

    公开(公告)号:CN115496857A

    公开(公告)日:2022-12-20

    申请号:CN202211177730.X

    申请日:2022-09-22

    申请人: 淮阴工学院

    摘要: 本发明公开了一种基于深度学习的多视角三维重建方法,包括:利用相机对重建目标进行多角度图像采集并选取一张图像作为参考图像;将采集的图像输入图像特征提取模块生成对应的特征图;通过单应性变换算法将特征图转换成参考图像视角下的特征图,并通过逐像素计算图像一致性构建代价体;将构建的代价体输入代价体正则化模块生成参考图像的稀疏深度图;将稀疏深度图输入深度图细化模块生成稠密深度图;根据稠密深度图生成重建目标的空间点云结构,实现三维重建。上述方法是一种基于图像的深度学习重建方法,具有较高稳定性,不受光照强度等环境因素影响,重建效果好,并采用端到端的重建方式,提高了重建效率。