公开(公告)号：US20140337023A1

公开(公告)日：2014-11-13

申请号：US13892094

申请日：2013-05-10

申请人： Daniel McCulloch ,  Abby Lin Lee ,  Adam Benjamin Smith-Kipnis ,  Jonathan William Plumb ,  Alexandre David ,  Michael O. Hale ,  Jeff Cole ,  Hendrik Mark Langerak

发明人： Daniel McCulloch ,  Abby Lin Lee ,  Adam Benjamin Smith-Kipnis ,  Jonathan William Plumb ,  Alexandre David ,  Michael O. Hale ,  Jeff Cole ,  Hendrik Mark Langerak

IPC分类号： G10L15/26

CPC分类号： G10L15/26 ,  G06F1/163 ,  G06F3/011 ,  G06F3/013

摘要： Embodiments that relate to converting audio inputs from an environment into text are disclosed. For example, in one disclosed embodiment a speech conversion program receives audio inputs from a microphone array of a head-mounted display device. Image data is captured from the environment, and one or more possible faces are detected from image data. Eye-tracking data is used to determine a target face on which a user is focused. A beamforming technique is applied to at least a portion of the audio inputs to identify target audio inputs that are associated with the target face. The target audio inputs are converted into text that is displayed via a transparent display of the head-mounted display device.

摘要翻译： 公开了将音频输入从环境转换为文本的实施例。 例如，在一个所公开的实施例中，语音转换程序从头戴式显示设备的麦克风阵列接收音频输入。 从环境中捕获图像数据，并从图像数据检测一个或多个可能的面。 眼睛跟踪数据用于确定用户聚焦的目标脸部。 波束形成技术被应用于至少一部分音频输入以识别与目标面相关联的目标音频输入。 目标音频输入被转换成通过头戴式显示设备的透明显示器显示的文本。

公开(公告)号：US20140240351A1

公开(公告)日：2014-08-28

申请号：US13779614

申请日：2013-02-27

申请人： Michael Scavezze ,  Nicholas Gervase Fajt ,  Arnulfo Zepeda Navratil ,  Jason Scott ,  Adam Benjamin Smith-Kipnis ,  Brian Mount ,  John Bevis ,  Cameron Brown ,  Tony Ambrus ,  Phillip Charles Heckinger ,  Dan Kroymann ,  Matthew G. Kaplan ,  Aaron Krauss

发明人： Michael Scavezze ,  Nicholas Gervase Fajt ,  Arnulfo Zepeda Navratil ,  Jason Scott ,  Adam Benjamin Smith-Kipnis ,  Brian Mount ,  John Bevis ,  Cameron Brown ,  Tony Ambrus ,  Phillip Charles Heckinger ,  Dan Kroymann ,  Matthew G. Kaplan ,  Aaron Krauss

IPC分类号： G06T19/00

CPC分类号： G06T19/006 ,  G02B27/0093 ,  G02B27/017 ,  G06F3/011 ,  G06F3/012 ,  G06F3/013 ,  G06F3/0346 ,  G06F3/04815

摘要： Embodiments that relate to providing motion amplification to a virtual environment are disclosed. For example, in one disclosed embodiment a mixed reality augmentation program receives from a head-mounted display device motion data that corresponds to motion of a user in a physical environment. The program presents via the display device the virtual environment in motion in a principal direction, with the principal direction motion being amplified by a first multiplier as compared to the motion of the user in a corresponding principal direction. The program also presents the virtual environment in motion in a secondary direction, where the secondary direction motion is amplified by a second multiplier as compared to the motion of the user in a corresponding secondary direction, and the second multiplier is less than the first multiplier.

摘要翻译： 公开了向虚拟环境提供运动放大的实施例。 例如，在一个所公开的实施例中，混合现实增强程序从头戴式显示设备接收与物理环境中的用户的运动相对应的运动数据。 该程序通过显示装置在主方向上呈现运动中的虚拟环境，与主要方向上的用户的运动相比，主方向运动被第一乘法器放大。 程序还呈现在辅助方向上运动的虚拟环境，其中次要方向运动与第二乘法器相比，在相对次要方向上与用户的运动相比较，第二乘法器小于第一乘法器。