公开(公告)号：US20100315335A1

公开(公告)日：2010-12-16

申请号：US12485543

申请日：2009-06-16

申请人： Nicolas Villar ,  John Helmes ,  Shahram Izadi ,  Daniel Rosenfeld ,  Stephen E. Hodges ,  David Alexander Butler ,  Xiang Cao ,  Otmar Hilliges ,  Richard Banks ,  Benjamin David Eidelson ,  Hrvoje Benko

发明人： Nicolas Villar ,  John Helmes ,  Shahram Izadi ,  Daniel Rosenfeld ,  Stephen E. Hodges ,  David Alexander Butler ,  Xiang Cao ,  Otmar Hilliges ,  Richard Banks ,  Benjamin David Eidelson ,  Hrvoje Benko

IPC分类号： G06F3/033

CPC分类号： G06F3/0354 ,  G06F3/016 ,  G06F3/017 ,  G06F3/0362 ,  G06F3/038 ,  G06F3/0383

摘要： A pointing device with independently movable portions is described. In an embodiment, a pointing device comprises a base unit and a satellite portion. The base unit is arranged to be located under a palm of a user's hand and be movable over a supporting surface. The satellite portion is arranged to be located under a digit of the user's hand and be independently movable over the supporting surface relative to the base unit. In embodiments, data from at least one sensing device is read, and movement of both the base unit and the independently movable satellite portion of the pointing device is calculated from the data. The movement of the base unit and the satellite portion is analyzed to detect a user gesture.

摘要翻译： 描述具有独立可移动部分的指示装置。 在一个实施例中，指示设备包括基本单元和卫星部分。 基座单元布置成位于用户手掌下方并且可在支撑表面上移动。 卫星部分被布置成位于用户手的数字下方，并且可相对于基座单元独立地在支撑表面上移动。 在实施例中，读取来自至少一个感测装置的数据，并且根据该数据计算指示装置的基本单元和可独立移动的卫星部分的移动。 分析基本单元和卫星部分的移动以检测用户手势。

公开(公告)号：US20100302199A1

公开(公告)日：2010-12-02

申请号：US12472257

申请日：2009-05-26

申请人： Stuart Taylor ,  Jonathan Hook ,  Shahram Izadi ,  Nicolas Villar ,  David Alexander Butler ,  Stephen E Hodges

发明人： Stuart Taylor ,  Jonathan Hook ,  Shahram Izadi ,  Nicolas Villar ,  David Alexander Butler ,  Stephen E Hodges

IPC分类号： G06F3/045

CPC分类号： G06F3/046 ,  G06F3/016

摘要： Ferromagnetic user interfaces are described. In embodiments, user interface devices are described that can detect the location of movement on a user-touchable portion by sensing movement of a ferromagnetic material. In some embodiments sensors are arranged in a two dimensional array, and the user interface device can determine the location of the movement in a plane substantially parallel to the two-dimensional array and the acceleration of movement substantially perpendicular to the two-dimensional array. In other embodiments, user interface devices are described that can cause a raised surface region to be formed on a ferrofluid layer of a user-touchable portion, which is detectable by the touch of a user. Embodiments describe how the raised surface region can be moved on the ferrofluid layer. Embodiments also describe how the raised surface region can be caused to vibrate.

摘要翻译： 描述了铁磁用户界面。 在实施例中，描述了可以通过感测铁磁材料的移动来检测用户可触摸部分上的移动位置的用户界面设备。 在一些实施例中，传感器被布置成二维阵列，并且用户界面设备可以确定基本上平行于二维阵列的平面中的移动位置和基本上垂直于二维阵列的移动加速度。 在其他实施例中，描述了用户界面设备，其可以使得可以通过用户的触摸可以检测到的用户可触摸部分的铁磁流体层形成凸起的表面区域。 实施例描述了凸起表面区域如何在铁磁流体层上移动。 实施例还描述了如何使凸起的表面区域发生振动。

公开(公告)号：US20100082662A1

公开(公告)日：2010-04-01

申请号：US12238169

申请日：2008-09-25

申请人： Stuart Taylor ,  Shahram Izadi ,  Richard Harper ,  Richard Banks ,  Abigail Sellen

发明人： Stuart Taylor ,  Shahram Izadi ,  Richard Harper ,  Richard Banks ,  Abigail Sellen

IPC分类号： G06F3/048 ,  G06F17/30

CPC分类号： G06F16/2428

摘要： A user interface for an information retrieval system is described. In an embodiment an output region for showing retrieved documents is displayed on an interactive surface. One or more movable user interface items, such as digital buttons or tangible objects, may be positioned in an active region. Each movable user interface item has a stored query associated with it and for example, the queries may be words or images. In an embodiment a user interface controller apparatus identifies any movable user interface items in the active region and identifies a spatial relationship between those items and the output region. In an embodiment, a query is accessed for each of the user interface items in the active region and those queries and the information about the spatial relationship are used to retrieve documents from a document database.

摘要翻译： 描述用于信息检索系统的用户界面。 在一个实施例中，用于显示检索到的文档的输出区域被显示在交互式表面上。 可以将一个或多个可移动用户界面项目（例如数字按钮或有形对象）定位在活动区域​​中。 每个可移动用户界面项目具有与其相关联的存储查询，并且例如，查询可以是单词或图像。 在一个实施例中，用户接口控制器设备识别活动区域中的任何可移动用户界面项，并且识别这些项与输出区之间的空间关系。 在一个实施例中，针对活动区域中的每个用户界面项访问查询，并且使用这些查询和关于空间关系的信息来从文档数据库检索文档。

公开(公告)号：US20080288666A1

公开(公告)日：2008-11-20

申请号：US11748389

申请日：2007-05-14

申请人： Stephen E. Hodges ,  David Alexander Butler ,  Shahram Izadi ,  Chih-Chieh Han

发明人： Stephen E. Hodges ,  David Alexander Butler ,  Shahram Izadi ,  Chih-Chieh Han

IPC分类号： G06F3/00

CPC分类号： G06F13/4095 ,  Y02D10/14 ,  Y02D10/151

摘要： A modular development platform is described which enables creation of reliable, compact, physically robust and power efficient embedded device prototypes. The platform consists of a base module which holds the processor and one or more peripheral modules each having a peripheral device and an interface element. The modules can be electrically and physically connected together. The base module communicates with peripheral modules using packets of data with an addressing portion which identifies the peripheral module that is the intended recipient of the data packet.

摘要翻译： 描述了一种模块化开发平台，可以创建可靠，紧凑，物理上坚固且功率高的嵌入式设备原型。 该平台由保持处理器的基本模块和每个具有外围设备和接口元件的一个或多个外围模块组成。 模块可以电气和物理连接在一起。 基本模块使用具有寻址部分的数据包与外围模块进行通信，该寻址部分标识作为数据分组的预期接收者的外围模块。

公开(公告)号：US20080122803A1

公开(公告)日：2008-05-29

申请号：US11693683

申请日：2007-03-29

申请人： Shahram Izadi ,  Stephen Hodges ,  David Alexander Butler ,  Alban Rrustemi

发明人： Shahram Izadi ,  Stephen Hodges ,  David Alexander Butler ,  Alban Rrustemi

IPC分类号： G06F3/042

CPC分类号： G06F3/0421 ,  G06F2203/04109

摘要： A touch panel is described which uses at least one infrared source and an array of infrared sensors to detect objects which are in contact with, or close to, the touchable surface of the panel. The panel may be operated in both reflective and shadow modes, in arbirary per-pixel combinations which change over time. For example, if the level of ambient infrared is detected and if that level exceeds a threshold, shadow mode is used for detection of touch events over some or all of the display. If the threshold is not exceeded, reflective mode is used to detect touch events. The touch panel includes an infrared source and an array of infrared sensors.

摘要翻译： 描述了触摸面板，其使用至少一个红外源和红外传感器阵列来检测与面板的可触摸表面接触或接近的物体。 面板可以在反射和阴影模式下操作，每个像素的组合随着时间的推移而变化。 例如，如果检测到环境红外线的电平，并且如果该电平超过阈值，则阴影模式用于在部分或全部显示器上检测触摸事件。 如果不超过阈值，则使用反射模式来检测触摸事件。 触摸面板包括红外线源和红外线传感器阵列。

公开(公告)号：US20080122792A1

公开(公告)日：2008-05-29

申请号：US11693670

申请日：2007-03-29

申请人： Shahram Izadi ,  Stephen Hodges ,  David Alexander Butler ,  Alban Rrustemi

发明人： Shahram Izadi ,  Stephen Hodges ,  David Alexander Butler ,  Alban Rrustemi

IPC分类号： G06F3/041

CPC分类号： G06F3/0421 ,  G06F2203/04109

摘要： A touch panel is arranged to enable communication using infrared signals with nearby devices. The touch panel includes an array of infrared sensors, arranged parallel to the touchable surface of the panel and at least one of the sensors is capable of detecting an infrared signal received from a nearby device.

摘要翻译： 触摸面板被布置成使得能够利用附近设备的红外信号进行通信。 触摸面板包括平行于面板的可触摸表面布置的红外传感器阵列，并且至少一个传感器能够检测从附近的设备接收的红外信号。

公开(公告)号：US09529424B2

公开(公告)日：2016-12-27

申请号：US12940322

申请日：2010-11-05

申请人： Otmar Hilliges ,  David Kim ,  Shahram Izadi ,  David Molyneaux ,  Stephen Edward Hodges ,  David Alexander Butler

发明人： Otmar Hilliges ,  David Kim ,  Shahram Izadi ,  David Molyneaux ,  Stephen Edward Hodges ,  David Alexander Butler

IPC分类号： G06F3/01 ,  G06F3/03 ,  A63F13/20 ,  H04N13/04

CPC分类号： G06F3/011 ,  A63F13/06 ,  A63F13/20 ,  G02B27/0101 ,  G02B2027/0138 ,  G02B2027/014 ,  G02B2027/0145 ,  G06F3/012 ,  G06F3/013 ,  G06F3/017 ,  G06F3/0304 ,  G06T19/006 ,  H04N13/30 ,  H04N13/366

摘要： Augmented reality with direct user interaction is described. In one example, an augmented reality system comprises a user-interaction region, a camera that captures images of an object in the user-interaction region, and a partially transparent display device which combines a virtual environment with a view of the user-interaction region, so that both are visible at the same time to a user. A processor receives the images, tracks the object's movement, calculates a corresponding movement within the virtual environment, and updates the virtual environment based on the corresponding movement. In another example, a method of direct interaction in an augmented reality system comprises generating a virtual representation of the object having the corresponding movement, and updating the virtual environment so that the virtual representation interacts with virtual objects in the virtual environment. From the user's perspective, the object directly interacts with the virtual objects.

摘要翻译： 描述了与直接用户交互的增强现实。 在一个示例中，增强现实系统包括用户交互区域，捕获用户交互区域中的对象的图像的相机以及将虚拟环境与用户交互区域的视图组合的部分透明显示设备 ，这样两者都可以同时显示给用户。 处理器接收图像，跟踪对象的移动，计算虚拟环境中的相应移动，并且基于相应的移动来更新虚拟环境。 在另一示例中，增强现实系统中的直接交互的方法包括生成具有相应移动的对象的虚拟表示，并且更新虚拟环境，使得虚拟表示与虚拟环境中的虚拟对象交互。 从用户的角度来看，对象直接与虚拟对象进行交互。

公开(公告)号：US09134798B2

公开(公告)日：2015-09-15

申请号：US12335301

申请日：2008-12-15

申请人： Meredith June Morris ,  Eric J. Horvitz ,  Andrew David Wilson ,  F. David Jones ,  Stephen E. Hodges ,  Kenneth P. Hinckley ,  David Alexander Butler ,  Ian M. Sands ,  V. Kevin Russ ,  Hrvoje Benko ,  Shawn R. LeProwse ,  Shahram Izadi ,  William Ben Kunz

发明人： Meredith June Morris ,  Eric J. Horvitz ,  Andrew David Wilson ,  F. David Jones ,  Stephen E. Hodges ,  Kenneth P. Hinckley ,  David Alexander Butler ,  Ian M. Sands ,  V. Kevin Russ ,  Hrvoje Benko ,  Shawn R. LeProwse ,  Shahram Izadi ,  William Ben Kunz

IPC分类号： G06F3/01

CPC分类号： G06F3/017 ,  H04L67/42

摘要： Aspects relate to detecting gestures that relate to a desired action, wherein the detected gestures are common across users and/or devices within a surface computing environment. Inferred intentions and goals based on context, history, affordances, and objects are employed to interpret gestures. Where there is uncertainty in intention of the gestures for a single device or across multiple devices, independent or coordinated communication of uncertainty or engagement of users through signaling and/or information gathering can occur.

摘要翻译： 方面涉及检测与期望动作相关的手势，其中检测到的手势在表面计算环境内的用户和/或设备之间是共同的。 使用基于上下文，历史，评估和对象的推断意图和目标来解释手势。 在单个设备或多个设备的手势意图不确定的情况下，可能发生通过信令和/或信息收集的用户的不确定性或参与的独立或协调的通信。

公开(公告)号：US09086741B2

公开(公告)日：2015-07-21

申请号：US12915386

申请日：2010-10-29

申请人： John Helmes ,  Shahram Izadi ,  Xiang Cao ,  Nicolas Villar ,  Richard Banks

发明人： John Helmes ,  Shahram Izadi ,  Xiang Cao ,  Nicolas Villar ,  Richard Banks

IPC分类号： G06F3/0346 ,  G06F3/01 ,  G06F3/023 ,  G06F3/0354

CPC分类号： G06F3/0346 ,  G06F3/016 ,  G06F3/017 ,  G06F3/0236 ,  G06F3/03547 ,  G06F2203/0339

摘要： A user input device is described. In an embodiment the user input device is hand held and comprises a sensing strip to detect one-dimensional motion of a user's finger or thumb along the sensing strip and to detect position of a user's finger or thumb on the sensing strip. In an embodiment the sensed data is used for cursor movement and/or text input at a master device. In an example the user input device has an orientation sensor and orientation of the device influences orientation of a cursor. For example, a user may move the cursor in a straight line in the pointing direction of the cursor by sliding a finger or thumb along the sensing strip. In an example, an alphabetical scale is displayed and a user is able to zoom into the scale and select letters for text input using the sensing strip.

摘要翻译： 描述用户输入设备。 在一个实施例中，用户输入装置是手持的，并且包括感测条，用于检测使用者的手指或拇指沿感测条的一维运动，并且检测使用者的手指或拇指在感测条上的位置。 在一个实施例中，所感测的数据用于在主设备处的光标移动和/或文本输入。 在示例中，用户输入设备具有定向传感器并且设备的取向影响光标的取向。 例如，用户可以通过沿着感测条滑动手指或拇指来将光标沿光标的指向方向沿直线移动。 在一个示例中，显示字母刻度，并且用户能够放大比例并使用感测条选择用于文本输入的字母。

公开(公告)号：US20150043770A1

公开(公告)日：2015-02-12

申请号：US13963117

申请日：2013-08-09

申请人： Nicholas Yen-Cherng Chen ,  Stephen Edward Hodges ,  Andrew William Fitzgibbon ,  Andrew Clark Goris ,  Brian Lee Hastings ,  Shahram Izadi

发明人： Nicholas Yen-Cherng Chen ,  Stephen Edward Hodges ,  Andrew William Fitzgibbon ,  Andrew Clark Goris ,  Brian Lee Hastings ,  Shahram Izadi

IPC分类号： G06T7/00 ,  G06K9/00

CPC分类号： G06T7/0042 ,  G06F3/011 ,  G06F3/0304 ,  G06F3/0346 ,  G06K9/00208 ,  G06T7/73

摘要： Speckle sensing for motion tracking is described, for example, to track a user's finger or head in an environment to control a graphical user interface, to track a hand-held device, to track digits of a hand for gesture-based control, and to track 3D motion of other objects or parts of objects in a real-world environment. In various examples a stream of images of a speckle pattern from at least one coherent light source illuminating the object, or which is generated by a light source at the object to be tracked, is used to compute an estimate of 3D position of the object. In various examples the estimate is transformed using information about position and/or orientation of the object from another source. In various examples the other source is a time of flight system, a structured light system, a stereo system, a sensor at the object, or other sources.

摘要翻译： 描述了用于运动跟踪的斑点感测，例如，在环境中跟踪用户的手指或头部以控制图形用户界面，跟踪手持设备，跟踪用于基于手势的控制的手的数字，以及 跟踪现实环境中其他对象或物体部分的3D运动。 在各种示例中，使用来自照亮对象的至少一个相干光源或由待跟踪对象上的光源产生的散斑图案的流图来计算对象的3D位置的估计。 在各种示例中，使用关于来自另一来源的对象的位置和/或取向的信息来转换估计。 在各种示例中，另一个来源是飞行时间系统，结构化光系统，立体声系统，物体上的传感器或其他来源。