-
公开(公告)号:CN112651286B
公开(公告)日:2024-04-09
申请号:CN202011081506.1
申请日:2020-10-10
申请人: 西安交通大学 , 宁波盈芯信息科技有限公司
摘要: 本公开涉及一种基于透明屏的三维深度感知装置,包括透明屏、三维深度感知模组、透明屏显示控制模块和深度补偿校正模块;其中,所述透明屏与显示屏幕拼接;所述三维深度感知模组,放置于透明屏沿法线方向的下方(以下简称为透明屏下),或者是结构光深度相机,或者是ToF深度相机;所述透明屏显示控制模块,放置在透明屏下,用于控制透明屏的显示;所述深度补偿校正模块,放置于透明屏下,对经透明屏折射及衍射后计算得到的深度信息进行补偿校正。本公开可以解决屏下三维感知的技术和应用难题,适合智能手机、智能TV等领域的嵌入式应用。
-
公开(公告)号:CN109963136A
公开(公告)日:2019-07-02
申请号:CN201711415009.9
申请日:2017-12-22
申请人: 宁波盈芯信息科技有限公司
IPC分类号: H04N13/204 , H04N13/25 , H04N13/254 , H04N13/296 , H04N13/161
摘要: 本发明公开了一种智能手机结构光深度相机的工作方法和装置,其中,采用RGB摄像头同步触发或主动触发两种模式,对RGB摄像头、红外激光编码图案投射器、红外泛光源、红外IR摄像头的曝光时间长短、开/关先后顺序等进行同步控制,通过RGB摄像头采集得到RGB图,红外IR摄像头采集得到红外图或红外编码图,其中红外编码图经深度感知解码可得到深度图,红外图可进行红外细节增强,该方法和装置,可同步控制投射器、泛光源、RGB和IR接收摄像头的先后顺序及曝光时间,有利于大幅降低结构光深度相机在智能手机3D自拍、人脸解锁、3D扫描重建应用过程中的工作功耗。
-
公开(公告)号:CN109948400A
公开(公告)日:2019-06-28
申请号:CN201711388905.0
申请日:2017-12-20
申请人: 宁波盈芯信息科技有限公司
摘要: 本公开涉及一种能够进行人脸特征3D识别的智能手机及其识别方法,所述手机包括点云获取模块、三维模型建立模块、特征向量模块、识别模块;所述点云获取模块利用手机上的编码图像投射器对人脸投射编码图像,利用深度摄像头采集编码图,基于编码图获得深度图,然后将深度图的像素坐标转换到空间坐标,从而获取三维点云;所述三维模型建立模块根据深度摄像头坐标系的转换矩阵融合三维点云,得到人脸三维模型;所述特征向量模块基于人脸三维模型提取人脸特征向量;所述识别模块基于人脸特征向量对人脸进行识别。本公开能够提高使用手机进行人脸识别的准确性,避免照片,视频录像或者合成的人脸模型欺骗,提高手机安全性。
-
公开(公告)号:CN108986178A
公开(公告)日:2018-12-11
申请号:CN201711345546.0
申请日:2017-12-14
申请人: 宁波盈芯信息科技有限公司
IPC分类号: G06T9/00
CPC分类号: G01B11/22 , G06F17/18 , G06K9/48 , H04N13/254
摘要: 本发明公开了一种用于结构光编码的随机编码图案生成方法,所述方法利用随机概率分布图,在一定的分布规则下,逐个添加编码基元,生成满足窗口唯一性分布要求的随机编码图案;该随机编码图案可单独作为结构光编码图案或作为结构光编码图案的基础图元进行拼接扩充。本方法得到的结构光编码图案经投射装置按一定视场角投射,可对三维空间或目标物体进行空间编码和特征标定,用于深度识别。本发明还公开了一种用于结构光编码的随机编码图案生成设备。本发明方法或设备所生成的随机编码图案具有随机性高,且支持多种不同形状大小的编码基元,可解决单目、双目或多目结构光深度解码过程中的辨识问题。
-
公开(公告)号:CN105120257B
公开(公告)日:2017-12-15
申请号:CN201510508440.2
申请日:2015-08-18
申请人: 宁波盈芯信息科技有限公司
CPC分类号: H04N13/271 , H04N13/106 , H04N13/254 , H04N13/257
摘要: 本发明公开了一种基于结构光编码的垂直深度感知装置,所述装置包括激光图形投射器、红外接收摄像头、RGB接收摄像头和深度感知模块;所述激光图形投射器、红外接收摄像头、RGB接收摄像头沿一直线垂直于水平面放置,所述激光图形投射器用于投射编码图像;所述红外接收摄像头用于连续采集所述编码图像并生成输入编码图像序列,RGB接收摄像头采集RGB视频流;深度感知模块用于生成深度图序列。本发明所述的装置不仅可以实时生成高分辨率、高精度的深度信息,而且解决了水平深度感知设备在深度测量过程中被测物体水平方向边缘存在的空洞问题,并有助于完成深度图序列与RGB视频流中的被测目标的一致提取。
-
-
公开(公告)号:CN112651286A
公开(公告)日:2021-04-13
申请号:CN202011081506.1
申请日:2020-10-10
申请人: 西安交通大学 , 宁波盈芯信息科技有限公司
摘要: 本公开涉及一种基于透明屏的三维深度感知装置,包括透明屏、三维深度感知模组、透明屏显示控制模块和深度补偿校正模块;其中,所述透明屏与显示屏幕拼接;所述三维深度感知模组,放置于透明屏沿法线方向的下方(以下简称为透明屏下),或者是结构光深度相机,或者是ToF深度相机;所述透明屏显示控制模块,放置在透明屏下,用于控制透明屏的显示;所述深度补偿校正模块,放置于透明屏下,对经透明屏折射及衍射后计算得到的深度信息进行补偿校正。本公开可以解决屏下三维感知的技术和应用难题,适合智能手机、智能TV等领域的嵌入式应用。
-
公开(公告)号:CN109901300B
公开(公告)日:2021-04-06
申请号:CN201711292957.8
申请日:2017-12-08
申请人: 宁波盈芯信息科技有限公司
IPC分类号: G02B27/09
摘要: 本发明提供了一种基于垂直腔面发射激光器VCSEL规则点阵的激光散斑投射器,包括VCSEL规则发光点阵、准直镜、光学衍射器件、X‑Y方向驱动电路、点阵显示控制模块,通过驱动VCSEL规则发光点阵上不同的发光颗粒,分时输出多帧不同的编码图案,从而实现对目标物体或投射空间的时空标记,最后通过深度解码算法完成目标物体的三维深度测量,相比传统的结构光空间编码技术,本发明的投射器有助于实现时空编码,从而在深度解码进行三维深度测量过程中能获得更高的精度、鲁棒性和抗干扰能力。
-
公开(公告)号:CN110049305B
公开(公告)日:2021-02-26
申请号:CN201811547634.3
申请日:2018-12-17
申请人: 西安交通大学 , 宁波盈芯信息科技有限公司
IPC分类号: H04N13/246
摘要: 一种智能手机的结构光深度相机自校正方法及装置,由红外激光散斑投射器、图像接收传感器、自校正模块、深度计算模块、手机应用处理AP构成,该装置和方法由投射器投射散斑图案,在参考散斑图像中设定特征块,通过图像接收传感器采集输入散斑图像,并在输入散斑图像中通过相似度准则搜寻该特征块对应的最优匹配块,得到特征块与匹配块之间的偏移量,一旦投射器与图像传感器的光轴发生相对变化,该偏移量会随之发生变化,按一定规则求取最优偏移量并反向调整参考散斑图像,使输入散斑图像中心与参考散斑图像中心能形成一个自反馈调节闭环系统,从而实现输入散斑图像和校正后的参考散斑图像在光轴发生较大范围变动时始终能找到最优匹配关系。
-
公开(公告)号:CN110070598A
公开(公告)日:2019-07-30
申请号:CN201810058604.X
申请日:2018-01-22
申请人: 宁波盈芯信息科技有限公司
IPC分类号: G06T17/00
摘要: 本公开提供一种用于3D扫描重建的移动终端及使用移动终端进行3D扫描重建方法,所述移动终端包括结构光激光散斑投射模块、RGB摄像头、TR摄像头、图像采集模块、图像匹配模块、坐标对齐模块、点云配准模块、点云融合模块、体绘制模块,各模块相互配合旨在利用当前硬件技术的微型化,同时通过利用硬件实现部分三维重建算法,减小三维重建软件算法的复杂度,通过GPU加速较快算法计算,使扫描重建实现实时化。本公开提出的扫描重建方法,提高扫描重建的实用性;最后设计RGB图像与点云的坐标对齐,使重建结果同时具有RGB和深度的信息;最终实现智能移动终端平台上多种方式的实时的融合RGB和深度信息的3d扫描重建。
-
-
-
-
-
-
-
-
-