公开(公告)号：US08493366B2

公开(公告)日：2013-07-23

申请号：US13181931

申请日：2011-07-13

申请人： Steven N. Bathiche ,  Andrew D. Wilson

发明人： Steven N. Bathiche ,  Andrew D. Wilson

IPC分类号： G06F3/042

CPC分类号： G06F3/04886 ,  G06F3/0238 ,  G06F3/0421 ,  G06F2203/04109 ,  G06F2203/04809

摘要： A dynamic projected user interface device is disclosed, that includes a projector, a projection controller, and an imaging sensor. The projection controller is configured to receive instructions from a computing device, and to provide display images via the projector onto display surfaces. The display images are indicative of a first set of input controls when the computing device is in a first operating context, and a second set of input controls when the computing device is in a second operating context. The imaging sensor is configured to optically detect physical contacts with the one or more display surfaces.

摘要翻译： 公开了一种动态投影用户界面装置，其包括投影仪，投影控制器和成像传感器。 投影控制器被配置为从计算设备接收指令，并且经由投影仪将显示图像提供到显示表面上。 当计算设备处于第一操作环境中时，显示图像指示第一组输入控件，当计算设备处于第二操作上下文中时，显示图像指示第二组输入控件。 成像传感器被配置为光学地检测与一个或多个显示表面的物理接触。

公开(公告)号：US20130138424A1

公开(公告)日：2013-05-30

申请号：US13305429

申请日：2011-11-28

申请人： Michael F. Koenig ,  Oscar Enrique Murillo ,  Ira Lynn Snyder, JR. ,  Andrew D. Wilson ,  Kenneth P. Hinckley ,  Ali M. Vassigh

发明人： Michael F. Koenig ,  Oscar Enrique Murillo ,  Ira Lynn Snyder, JR. ,  Andrew D. Wilson ,  Kenneth P. Hinckley ,  Ali M. Vassigh

IPC分类号： G06F17/27

CPC分类号： G10L21/10 ,  G06F17/27 ,  G06F17/271 ,  G06Q10/10 ,  G10L21/00

摘要： The subject disclosure is directed towards detecting symbolic activity within a given environment using a context-dependent grammar. In response to receiving sets of input data corresponding to one or more input modalities, a context-aware interactive system processes a model associated with interpreting the symbolic activity using context data for the given environment. Based on the model, related sets of input data are determined. The context-aware interactive system uses the input data to interpret user intent with respect to the input and thereby, identify one or more commands for a target output mechanism.

摘要翻译： 本发明涉及使用上下文相关语法在给定环境内检测符号活动。 响应于对应于一个或多个输入模态的接收输入数据集，上下文感知交互系统使用用于给定环境的上下文数据来处理与解释符号活动相关联的模型。 基于该模型，确定相关的输入数据集。 上下文感知交互系统使用输入数据来解释用户对输入的意图，从而识别用于目标输出机制的一个或多个命令。

公开(公告)号：US08380246B2

公开(公告)日：2013-02-19

申请号：US11839279

申请日：2007-08-15

申请人： Andrew D. Wilson ,  Raman K. Sarin ,  Kenneth P. Hinckley

发明人： Andrew D. Wilson ,  Raman K. Sarin ,  Kenneth P. Hinckley

IPC分类号： H04M1/00

CPC分类号： H04W4/008 ,  H04M1/7253 ,  H04M2250/02 ,  H04W4/80

摘要： A mobile device connection system is provided. The system includes an input medium to detect a device position or location. An analysis component determines a device type and establishes a connection with the device. The input medium can include vision systems to detect device presence and location where connections are established via wireless technologies.

公开(公告)号：US20120320157A1

公开(公告)日：2012-12-20

申请号：US13160080

申请日：2011-06-14

申请人： Sasa Junuzovic ,  William Thomas Blank ,  Steven Bathiche ,  Anoop Gupta ,  Andrew D. Wilson

发明人： Sasa Junuzovic ,  William Thomas Blank ,  Steven Bathiche ,  Anoop Gupta ,  Andrew D. Wilson

IPC分类号： H04N5/225 ,  H04N13/02

CPC分类号： H04N9/3179 ,  G03B15/05 ,  G03B17/54 ,  G03B2215/05 ,  G06F3/00 ,  G06F3/0425 ,  G06F3/0426 ,  H04L12/1813 ,  H04N5/2256 ,  H04N5/247 ,  H04N5/33 ,  H04N7/141 ,  H04N9/3194 ,  H04N13/207 ,  H04N13/254 ,  H04N13/271

摘要： A “Concurrent Projector-Camera” uses an image projection device in combination with one or more cameras to enable various techniques that provide visually flicker-free projection of images or video, while real-time image or video capture is occurring in that same space. The Concurrent Projector-Camera provides this projection in a manner that eliminates video feedback into the real-time image or video capture. More specifically, the Concurrent Projector-Camera dynamically synchronizes a combination of projector lighting (or light-control points) on-state temporal compression in combination with on-state temporal shifting during each image frame projection to open a “capture time slot” for image capture during which no image is being projected. This capture time slot represents a tradeoff between image capture time and decreased brightness of the projected image. Examples of image projection devices include LED-LCD based projection devices, DLP-based projection devices using LED or laser illumination in combination with micromirror arrays, etc.

摘要翻译： 兼投影器相机使用与一个或多个摄像机组合的图象投影装置，以使提供视觉图像或视频的无闪烁的突起，而实时图像或视频捕获在同一空间发生的各种技术。 并发投影器相机提供了消除视频反馈到实时图像或视频捕获的方式这一预测。 更具体地，并发投影器相机动态每个图像帧投影期间同步的投影仪的照明（或光控制点）的导通状态在组合时间压缩与导通状态的时间移位的组合期间打开用于图像捕获的捕获时隙 没有图像被投影。 该捕获时隙表示图像捕获时间与投影图像的亮度降低之间的折衷。 图像投影设备的示例包括基于LED-LCD的投影设备，使用LED或激光照明的基于DLP的投影设备与微镜阵列的组合等。

公开(公告)号：US20120105315A1

公开(公告)日：2012-05-03

申请号：US13346472

申请日：2012-01-09

申请人： Andrew D. Wilson ,  Michael J. Sinclair

发明人： Andrew D. Wilson ,  Michael J. Sinclair

IPC分类号： G09G5/00

CPC分类号： G06F3/017 ,  G06F3/0304 ,  G06F3/04815 ,  G06F3/04845

摘要： Virtual controllers for visual displays are described. In one implementation, a camera captures an image of hands against a background. The image is segmented into hand areas and background areas. Various hand and finger gestures isolate parts of the background into independent areas, which are then assigned control parameters for manipulating the visual display. Multiple control parameters can be associated with attributes of multiple independent areas formed by two hands, for advanced control including simultaneous functions of clicking, selecting, executing, horizontal movement, vertical movement, scrolling, dragging, rotational movement, zooming, maximizing, minimizing, executing file functions, and executing menu choices.

摘要翻译： 描述了用于视觉显示的虚拟控制器。 在一个实现中，相机在背景上拍摄手的图像。 图像被分割为手区域和背景区域。 各种手指和手指手势将背景的一部分隔离成独立的区域，然后分配控制参数以操纵视觉显示。 多个控制参数可以与由双手形成的多个独立区域的属性相关联，用于高级控制，包括点击，选择，执行，水平移动，垂直移动，滚动，拖动，旋转移动，缩放，最大化，最小化，执行的同时功能 文件功能和执行菜单选项。

公开(公告)号：US20110285633A1

公开(公告)日：2011-11-24

申请号：US13181931

申请日：2011-07-13

申请人： Steven N. Bathiche ,  Andrew D. Wilson

发明人： Steven N. Bathiche ,  Andrew D. Wilson

IPC分类号： G06F3/02

CPC分类号： G06F3/04886 ,  G06F3/0238 ,  G06F3/0421 ,  G06F2203/04109 ,  G06F2203/04809

摘要： A dynamic projected user interface device is disclosed, that includes a projector, a projection controller, and an imaging sensor. The projection controller is configured to receive instructions from a computing device, and to provide display images via the projector onto display surfaces. The display images are indicative of a first set of input controls when the computing device is in a first operating context, and a second set of input controls when the computing device is in a second operating context. The imaging sensor is configured to optically detect physical contacts with the one or more display surfaces.

摘要翻译： 公开了一种动态投影用户界面装置，其包括投影仪，投影控制器和成像传感器。 投影控制器被配置为从计算设备接收指令，并且经由投影仪将显示图像提供到显示表面上。 当计算设备处于第一操作环境中时，显示图像指示第一组输入控件，当计算设备处于第二操作上下文中时，显示图像指示第二组输入控件。 成像传感器被配置为光学地检测与一个或多个显示表面的物理接触。

公开(公告)号：US20100151946A1

公开(公告)日：2010-06-17

申请号：US12495105

申请日：2009-06-30

申请人： Andrew D. Wilson ,  Nuria M. Oliver

发明人： Andrew D. Wilson ,  Nuria M. Oliver

IPC分类号： A63F9/24 ,  G06F3/033 ,  H03G3/00 ,  G06F17/00

CPC分类号： G06F3/017 ,  A63F13/211 ,  A63F13/213 ,  A63F13/42 ,  A63F13/428 ,  A63F2300/1093 ,  G06F3/011 ,  G06F3/012 ,  G06F3/013 ,  G06F3/0346 ,  G06F3/038 ,  G06K9/00335 ,  G06K9/00355 ,  G06T7/20 ,  G06T7/285 ,  G06T7/593 ,  H04N13/128 ,  H04N13/239 ,  H04N13/366 ,  H04N2013/0081

摘要： A 3-D imaging system for recognition and interpretation of gestures to control a computer. The system includes a 3-D imaging system that performs gesture recognition and interpretation based on a previous mapping of a plurality of hand poses and orientations to user commands for a given user. When the user is identified to the system, the imaging system images gestures presented by the user, performs a lookup for the user command associated with the captured image(s), and executes the user command(s) to effect control of the computer, programs, and connected devices.

摘要翻译： 用于识别和解释手势以控制计算机的3-D成像系统。 该系统包括一个3-D成像系统，其基于对于给定用户的多个手姿势和朝向用户命令的先前映射来执行手势识别和解释。 当用户被识别到系统时，成像系统将用户呈现的姿势图像进行与所捕获的图像相关联的用户命令的查找，并且执行用户命令以实现计算机的控制， 程序和连接的设备。

公开(公告)号：US20100026470A1

公开(公告)日：2010-02-04

申请号：US12185174

申请日：2008-08-04

申请人： Andrew D. Wilson ,  Alex Olwal

发明人： Andrew D. Wilson ,  Alex Olwal

IPC分类号： H04Q5/22 ,  G06F3/041

CPC分类号： G06F3/046 ,  G06K9/32 ,  G06K9/6288 ,  H04Q2213/13095

摘要： The claimed subject matter provides a system and/or a method that facilitates detecting and identifying objects within surface computing. An interface component can receive at least one surface input, the surface input relates to at least one of an object, a gesture, or a user. A surface detection component can detect a location of the surface input utilizing a computer vision-based sensing technique. A Radio Frequency Identification (RFID) tag can transmit a portion of RFID data, wherein the RFID tag is associated with the surface input. A Radio Frequency Identification (RFID) fusion component can utilize the portion of RFID data to identify at least one of a source of the surface input or a portion of data to associate to the surface input.

摘要翻译： 所要求保护的主题提供了一种便于在表面计算中检测和识别物体的系统和/或方法。 接口组件可以接收至少一个表面输入，表面输入涉及对象，手势或用户中的至少一个。 表面检测组件可以使用基于计算机视觉的感测技术来检测表面输入的位置。 射频识别（RFID）标签可以传送RFID数据的一部分，其中RFID标签与表面输入相关联。 射频识别（RFID）融合组件可以利用RFID数据的该部分来识别表面输入的源或与表面输入相关联的数据的一部分中的至少一个。

公开(公告)号：US07626578B2

公开(公告)日：2009-12-01

申请号：US12210041

申请日：2008-09-12

申请人： Andrew D. Wilson ,  Dawson L. Yee

发明人： Andrew D. Wilson ,  Dawson L. Yee

IPC分类号： G06F3/042

CPC分类号： G06F3/0418 ,  G06F3/0425

摘要： In an interactive display system, a projected image on a display surface and a vision system used to detect objects touching the display surface are aligned, and optical distortion of the vision system is compensated. Also, calibration procedures correct for a non-uniformity of infrared (IR) illumination of the display surface by IR light sources and establish a touch threshold for one or more uses so that the interactive display system correctly responds to each user touching the display surface. A movable IR camera filter enables automation of the alignment of the projected image and the image of the display surface and help in detecting problems in either the projector or vision system.

摘要翻译： 在交互式显示系统中，显示面上的投影图像和用于检测触摸显示面的物体的视觉系统被对准，视觉系统的光学失真被补偿。 此外，校准程序通过IR光源校正显示表面的红外（IR）照明的不均匀性并且建立用于一个或多个用途的触摸阈值，使得交互式显示系统正确地响应于触摸显示表面的每个用户。 可移动的红外相机滤镜可实现投影图像和显示表面图像的对准自动化，并有助于检测投影机或视觉系统中的问题。

公开(公告)号：US20080231611A1

公开(公告)日：2008-09-25

申请号：US12110032

申请日：2008-04-25

申请人： Steven Bathiche ,  David Joshua Kurlander ,  Andrew D. Wilson ,  Christina Summer Chen ,  Joel P. Dehlin

发明人： Steven Bathiche ,  David Joshua Kurlander ,  Andrew D. Wilson ,  Christina Summer Chen ,  Joel P. Dehlin

IPC分类号： G06F3/042

CPC分类号： A63F13/65 ,  A63F3/00643 ,  A63F9/183 ,  A63F13/00 ,  A63F13/213 ,  A63F2300/1075 ,  A63F2300/1087 ,  A63F2300/69 ,  G06F3/011 ,  G06F3/016 ,  G06F3/0425 ,  G06F3/04815

摘要： An interactive table has a display surface on which a physical object is disposed. A camera within the interactive table responds to infrared (IR) light reflected from the physical object enabling a location of the physical object on the display surface to be determined, so that the physical object appear part of a virtual environment displayed thereon. The physical object can be passive or active. An active object performs an active function, e.g., it can be self-propelled to move about on the display surface, or emit light or sound, or vibrate. The active object can be controlled by a user or the processor. The interactive table can project an image through a physical object on the display surface so the image appears part of the object. A virtual entity is preferably displayed at a position (and a size) to avoid visually interference with any physical object on the display surface.

摘要翻译： 交互式表具有设置物理对象的显示面。 交互式表中的相机响应于从物理对象反射的红外（IR）光，从而能够确定显示表面上的物理对象的位置，使得物理对象显示在其上显示的虚拟环境的一部分。 物理对象可以是被动的或主动的。 活动对象执行主动功能，例如，其可以自推进在显示表面上移动，或发出光或声音或振动。 活动对象可由用户或处理器控制。 交互式表格可以通过显示表面上的物理对象投影图像，从而将图像显示在对象的一部分中。 虚拟实体优选地在位置（和尺寸）处显示，以避免与显示表面上的任何物理对象的视觉干扰。