公开(公告)号：CN104380704B

公开(公告)日：2017-11-17

申请号：CN201380033428.X

申请日：2013-07-24

申请人： 英特尔公司

发明人： Y.吴 ,  W.孙 ,  M.M.楚 ,  E.德雷沙 ,  P.穆斯 ,  L.B.艾恩斯沃思 ,  G.舍马克 ,  I.V.科津特塞夫

IPC分类号： H04N5/222 ,  H04N5/232 ,  H04N13/00 ,  H04N13/04

CPC分类号： H04N13/376 ,  G06T7/11 ,  G06T7/194 ,  G06T2207/10028 ,  H04N5/2226 ,  H04N5/23219 ,  H04N7/147 ,  H04N13/156 ,  H04N13/161 ,  H04N13/194 ,  H04N13/20 ,  H04N13/30 ,  H04N2013/0092 ,  H04N2213/006

摘要： 一般地，本公开通过基于标识、切分和跟踪图像的前景和背景层所生成的视差效应来提供用于具有三维感知图像呈现的实时视频通信的方法和系统。所述系统可包括：图像切分模块，配置成将当前本地视频帧分为本地前景层和本地背景层，并且基于本地前景层和本地背景层之间估计的边界来生成本地前景掩模，其中，当前本地视频帧包括本地颜色视频图像帧和本地图像深度数据帧；面部跟踪模块，配置成基于当前本地视频帧以及一个或多个先前本地视频帧来跟踪本地用户的面部的位置；背景层估计模块，配置成估计与从远程视频处理器接收的当前远程视频帧和远程前景掩模关联的远程背景层；以及图像呈现模块，配置成基于所估计的远程背景层、从远程视频处理器接收的当前远程视频帧和远程前景掩模、以及本地用户的面部的所跟踪的位置来呈现3D感知图像。

公开(公告)号：CN104380704A

公开(公告)日：2015-02-25

申请号：CN201380033428.X

申请日：2013-07-24

申请人： 英特尔公司

发明人： Y.吴 ,  W.孙 ,  M.M.楚 ,  E.德雷沙 ,  P.穆斯 ,  L.B.艾恩斯沃思 ,  G.舍马克 ,  I.V.科津特塞夫

IPC分类号： H04N5/222 ,  H04N5/232 ,  H04N13/00 ,  H04N13/04

CPC分类号： H04N13/376 ,  G06T7/11 ,  G06T7/194 ,  G06T2207/10028 ,  H04N5/2226 ,  H04N5/23219 ,  H04N7/147 ,  H04N13/156 ,  H04N13/161 ,  H04N13/194 ,  H04N13/20 ,  H04N13/30 ,  H04N2013/0092 ,  H04N2213/006

摘要： 一般地，本公开通过基于标识、切分和跟踪图像的前景和背景层所生成的视差效应来提供用于具有三维感知图像呈现的实时视频通信的方法和系统。所述系统可包括：图像切分模块，配置成将当前本地视频帧分为本地前景层和本地背景层，并且基于本地前景层和本地背景层之间估计的边界来生成本地前景掩模，其中，当前本地视频帧包括本地颜色视频图像帧和本地图像深度数据帧；面部跟踪模块，配置成基于当前本地视频帧以及一个或多个先前本地视频帧来跟踪本地用户的面部的位置；背景层估计模块，配置成估计与从远程视频处理器接收的当前远程视频帧和远程前景掩模关联的远程背景层；以及图像呈现模块，配置成基于所估计的远程背景层、从远程视频处理器接收的当前远程视频帧和远程前景掩模、以及本地用户的面部的所跟踪的位置来呈现3D感知图像。