公开(公告)号：WO2017087083A1

公开(公告)日：2017-05-26

申请号：PCT/US2016/055528

申请日：2016-10-05

Applicant: GOOGLE INC.

Inventor： DONNER, Craig ,  LALONDE, Paul Albert ,  PARKER, Evan Hardesty

IPC: G06F3/01 ,  G06F3/038 ,  H04N13/04 ,  G02B27/01 ,  G06F3/0346 ,  G02B27/00

CPC classification number: G06T15/04 ,  G02B27/0093 ,  G02B27/017 ,  G02B27/0172 ,  G02B27/0179 ,  G02B2027/0132 ,  G02B2027/014 ,  G02B2027/0187 ,  G06F3/011 ,  G06F3/012 ,  G06F3/0346 ,  G06F3/038 ,  G06T7/2086 ,  G06T7/285 ,  G06T7/408 ,  G06T7/90 ,  G06T19/006 ,  G06T2200/04 ,  H04N13/344 ,  H04N13/376

Abstract: A system (100) includes a head mounted display (HMD) device (102) comprising at least one display (112, 114) and at least one sensor (210) to provide pose information for the HMD device. The system further includes a sensor integrator module (304) coupled to the at least one sensor, the sensor integrator module to determine a motion vector for the HMD device based on the pose information, and an application processor (204) to render a first texture (122, 322) based on pose of the HMD device determined from the pose information. The system further includes a motion analysis module (302) to determine a first velocity field (128, 328) having a pixel velocity for at least a subset of pixels of the first texture, and a compositor (224) to render a second texture (140, 334) based on the first texture, the first velocity field and the motion vector for the HMD, and to provide the second texture to the display of the HMD device.

Abstract translation: 系统（100）包括包含至少一个显示器（112,114）和至少一个传感器（210）的头戴式显示器（HMD）设备（102），以提供HMD的姿态信息 设备。 该系统还包括耦合到至少一个传感器的传感器集成器模块（304），传感器集成器模块基于姿势信息确定HMD设备的运动矢量，以及应用处理器（204），用于渲染第一纹理 （122,322），其基于从姿势信息确定的HMD设备的姿态。 该系统还包括：运动分析模块（302），用于确定具有用于第一纹理的像素的至少一个子集的像素速度的第一速度场（128,328）;以及合成器（224），用于渲染第二纹理 基于第一纹理，第一速度场和用于HMD的运动矢量，并将第二纹理提供给HMD设备的显示器。

公开(公告)号：WO2017171943A1

公开(公告)日：2017-10-05

申请号：PCT/US2016/066534

申请日：2016-12-14

Applicant: GOOGLE INC.

Inventor： LALONDE, Paul Albert ,  DOCHTERMANN, Mark ,  FAABORG, Alexander James ,  OVERBECK, Ryan

IPC: G06F3/01 ,  G06F3/0481 ,  G02B27/00

CPC classification number: G06T19/006 ,  G02B27/0093 ,  G02B27/017 ,  G02B2027/0138 ,  G06F3/012 ,  G06F3/013 ,  G06F3/0481 ,  G06F3/04842 ,  G06F2203/04804 ,  G06T11/60 ,  H04N5/225

Abstract: Systems and methods are described for generating a virtual reality experience including generating a user interface with a plurality of regions on a display in a head-mounted display device, HMD. The HMD housing may include at least one pass-through camera. The systems and methods can include obtaining image content from the at least one pass-through camera and displaying a virtual environment with virtual objects in a first region of the plurality of regions in the user interface, the first region substantially filling a field of view, i.e. the majority and especially the central part, of the display in the HMD. In response to detecting a change in a head position of a user operating the HMD, the methods and systems can initiate display of updated image content from one of the pass-through cameras in a second region of the user interface. Thereby the user sees a mixture of real physical image content and virtual reality content in a composite image in his field of view.

Abstract translation: 描述了用于生成虚拟现实体验的系统和方法，包括在头戴式显示设备HMD中的显示器上生成具有多个区域的用户界面。 HMD外壳可以包括至少一个直通式照相机。 所述系统和方法可以包括：从所述至少一个直通摄像机获得图像内容，并且在所述用户界面中的所述多个区域的第一区域中用虚拟对象显示虚拟环境，所述第一区域基本上填充视场， 即HMD中的显示器的大部分，尤其是中央部分。 响应于检测到操作HMD的用户的头部位置的改变，该方法和系统可以启动来自用户界面的第二区域中的直通照相机之一的更新的图像内容的显示。 因此，用户在他的视野中看到真实物理图像内容和虚拟现实内容在合成图像中的混合。