图像自适应合成方法、装置及计算机可读存储介质

    公开(公告)号:CN110798634B

    公开(公告)日:2020-10-09

    申请号:CN201911186190.X

    申请日:2019-11-28

    Applicant: 东北大学

    Inventor: 王斌 杨晓春 刘一

    Abstract: 本发明公开了一种图像自适应合成方法、装置及计算机可读存储介质,属于图像处理技术领域。该图像自适应合成方法包括以下步骤:先确定前景和背景的相机参数;接着,分别获取前景和背景中对应合成轨迹的任一匹配点,并确定两个匹配点的在相机坐标系下的坐标以及在像素坐标系下的坐标;然后,判断两个匹配点在相机坐标系下的深度大小,并对前景或背景进行仿射变换处理后,再通过OpenCV进行图像合成,即可得到合成图像。本发明通过先对前景或背景进行仿射变换处理,然后再通过OpenCV进行图像合成,可以在对应的前景相机与背景相机位置及参数不同的情况下,实现拍摄过程中无需手动调节控制参数以及可以实时地输出合成图像的目的。

    一种虚拟现实和混合现实的协作控制交互方法

    公开(公告)号:CN112181139B

    公开(公告)日:2022-04-15

    申请号:CN202010979578.1

    申请日:2020-09-17

    Applicant: 东北大学

    Inventor: 王斌 杨晓春 刘一

    Abstract: 本发明公开了一种虚拟现实和混合现实的协作控制交互方法,包括如下步骤,步骤一:通过Unity3D开发平台搭建虚拟乒乓球对打环境模型,实现控制交互的可视化;步骤二:将虚拟现实设备HTC Vive与高性能计算机进行连接;步骤三:进行虚拟现实与混合现实的交互;步骤四:对虚拟现实和混合现实坐标系进行统一;步骤五:实现混合现实和混合现实的交互。本发明中,以在全息图中进行虚拟乒乓球对打游戏为例,保留了每个用户非对称模式下的可操作性,以虚拟现实设备作为输入设备代替手部的直接操作,避免了系统中有限的手部姿势识别的局限;在混合现实设备之间的协作交互的基础上,实现了混合现实、虚拟现实两种设备的控制交互。

    一种虚拟现实和混合现实的协作控制交互方法

    公开(公告)号:CN112181139A

    公开(公告)日:2021-01-05

    申请号:CN202010979578.1

    申请日:2020-09-17

    Applicant: 东北大学

    Inventor: 王斌 杨晓春 刘一

    Abstract: 本发明公开了一种虚拟现实和混合现实的协作控制交互方法,包括如下步骤,步骤一:通过Unity3D开发平台搭建虚拟乒乓球对打环境模型,实现控制交互的可视化;步骤二:将虚拟现实设备HTC Vive与高性能计算机进行连接;步骤三:进行虚拟现实与混合现实的交互;步骤四:对虚拟现实和混合现实坐标系进行统一;步骤五:实现混合现实和混合现实的交互。本发明中,以在全息图中进行虚拟乒乓球对打游戏为例,保留了每个用户非对称模式下的可操作性,以虚拟现实设备作为输入设备代替手部的直接操作,避免了系统中有限的手部姿势识别的局限;在混合现实设备之间的协作交互的基础上,实现了混合现实、虚拟现实两种设备的控制交互。

    基于Unity 3D的三维虚拟现实合成算法

    公开(公告)号:CN112003999A

    公开(公告)日:2020-11-27

    申请号:CN202010966894.5

    申请日:2020-09-15

    Applicant: 东北大学

    Inventor: 王斌 杨晓春 刘一

    Abstract: 本发明公开了基于Unity 3D的三维虚拟现实合成算法,通过Unity 3D开启虚拟场景;连接HTC Hive设备;在蓝幕或绿幕影棚前将Kinect2.0摄像头布置;将Kinect2.0摄像头与HTC Hive头盔绑定;开启合成,从前景与背景同步获取数据,通过三维虚拟现实合成算法处理,获取结果帧并保存;结束合成、展示、录制操作。本发明中,将foreFrame,backFrame缩放至size尺寸;根据前景图foreFrame与色键RGB的值创建距离图dist,dist的值为255处为前景区,为0处为背景区;根据输出图像尺寸创建结果图result,根据dist扫描foreFrame与backFrame,若扫描区域属于前景区,则将foreFrame对应位置的像素赋值给result,否则将backFrame对应位置像素赋值给result;综上使在不知道虚拟场景内部相机参数的情况下,也能达到在拍摄过程中实时地输出合成图像的效果。

    图像自适应合成方法、装置及计算机可读存储介质

    公开(公告)号:CN110798634A

    公开(公告)日:2020-02-14

    申请号:CN201911186190.X

    申请日:2019-11-28

    Applicant: 东北大学

    Inventor: 王斌 杨晓春 刘一

    Abstract: 本发明公开了一种图像自适应合成方法、装置及计算机可读存储介质,属于图像处理技术领域。该图像自适应合成方法包括以下步骤:先确定前景和背景的相机参数;接着,分别获取前景和背景中对应合成轨迹的任一匹配点,并确定两个匹配点的在相机坐标系下的坐标以及在像素坐标系下的坐标;然后,判断两个匹配点在相机坐标系下的深度大小,并对前景或背景进行仿射变换处理后,再通过OpenCV进行图像合成,即可得到合成图像。本发明通过先对前景或背景进行仿射变换处理,然后再通过OpenCV进行图像合成,可以在对应的前景相机与背景相机位置及参数不同的情况下,实现拍摄过程中无需手动调节控制参数以及可以实时地输出合成图像的目的。

Patent Agency Ranking