公开(公告)号：US09244923B2

公开(公告)日：2016-01-26

申请号：US13566084

申请日：2012-08-03

申请人： Matthew L. Cooper ,  Scott Carter ,  John Adcock ,  Andreas Girgensohn ,  Qiong Liu ,  Frank M. Shipman, III ,  Lynn Donelle Wilcox

发明人： Matthew L. Cooper ,  Scott Carter ,  John Adcock ,  Andreas Girgensohn ,  Qiong Liu ,  Frank M. Shipman, III ,  Lynn Donelle Wilcox

IPC分类号： G06F17/30

CPC分类号： G06F17/3002 ,  G06F17/30014

摘要： A method for generating content links between a first digital file and a second digital file by detecting a content feature of a first digital file segment of the first digital file during playback of the first digital file segment of the first digital file, searching an index of a plurality of content features for a plurality of segments including a second digital file segment of the second digital file, and dynamically generating a link between the first digital file one segment of the first digital file and the second digital file segment of the second digital file when a content feature of the first digital file segment of the first digital file is related to the content feature of the at least one segment of the second digital file.

摘要翻译： 一种用于通过在第一数字文件的第一数字文件段的重放期间检测第一数字文件的第一数字文件段的内容特征来产生第一数字文件和第二数字文件之间的内容链接的方法， 用于包括第二数字文件的第二数字文件段的多个段的多个内容特征，以及动态生成第一数字文件的第一数字文件一段与第二数字文件的第二数字文件段之间的链接 当第一数字文件的第一数字文件段的内容特征与第二数字文件的至少一个片段的内容特征相关时。

公开(公告)号：US08866699B2

公开(公告)日：2014-10-21

申请号：US12326767

申请日：2008-12-02

申请人： Volker Roth ,  Laurent Denoue ,  Qiong Liu ,  Scott Carter

发明人： Volker Roth ,  Laurent Denoue ,  Qiong Liu ,  Scott Carter

IPC分类号： G09G5/00 ,  G06F3/14

CPC分类号： G06F3/1454 ,  G09G2340/0407 ,  G09G2340/0464 ,  G09G2340/12 ,  G09G2340/145 ,  G09G2370/16

摘要： A system and method for interacting with a mobile device using an external display is disclosed, where a mobile device provides representations of an object and action to an external display for a user to select and then input back to the mobile device. An application on a mobile device provides representation data of an object and an action to a host system driving an external display. The host system arranges the representation data into a representation on the external display and allows the user to interact with the representations. The user then selects a representation and inputs the selected representation into the mobile device, where the application processes the representation to carry out the appropriate actions on the appropriate objects. The representation may be inputted to the mobile device using a photo of the representation taken by a mobile device camera, or by inputting a code provided with each representation on the external display.

摘要翻译： 公开了一种使用外部显示器与移动设备进行交互的系统和方法，其中移动设备向外部显示器提供对象和动作的表示，供用户选择然后输入到移动设备。 移动设备上的应用将对象和动作的表示数据提供给驱动外部显示器的主机系统。 主机系统将表示数据排列在外部显示器上的表示中，并允许用户与表示进行交互。 然后，用户选择表示并将所选择的表示输入到移动设备中，其中应用处理该表示以对适当的对象执行适当的动作。 该表示可以使用移动设备摄像机所采用的表示的照片或者通过在外部显示器上输入与每个表示一起提供的代码来将其输入到移动设备。

公开(公告)号：US08805117B2

公开(公告)日：2014-08-12

申请号：US13186432

申请日：2011-07-19

申请人： Qiong Liu ,  Chunyuan Liao ,  Xin Yang

发明人： Qiong Liu ,  Chunyuan Liao ,  Xin Yang

IPC分类号： G06K9/66 ,  G06K9/46 ,  G06K9/32

CPC分类号： G06K9/4671 ,  G06K9/6202 ,  G06K9/6205 ,  G06K9/6218

摘要： Systems and methods for addressing the problem of specific planar object search from a large-scale image database. Given a query image with a particular object and a planar surface, the systems and methods attempt to find, from a large image corpus, a set of representative images in which that object appears. According to the complexity of geometric transformations between a query image and its target images, the whole problem can be categorized into two classes: Rotation-Scale-Translation (RST)-transformed image search, and affine/homography-transformed image search.

摘要翻译： 用于解决大型图像数据库中特定平面对象搜索问题的系统和方法。 给定具有特定对象和平面表面的查询图像，系统和方法尝试从大图像语料库中找到该对象出现的一组代表图像。 根据查询图像与目标图像之间的几何变换的复杂性，整个问题可以分为旋转缩放（RST） - 转换图像搜索和仿射/单色变换图像搜索两类。

公开(公告)号：US20140040273A1

公开(公告)日：2014-02-06

申请号：US13566084

申请日：2012-08-03

申请人： Matthew L. COOPER ,  Scott CARTER ,  John ADCOCK ,  Andreas GIRGENSOHN ,  Qiong LIU ,  Frank M. SHIPMAN, III ,  Lynn Donelle WILCOX

发明人： Matthew L. COOPER ,  Scott CARTER ,  John ADCOCK ,  Andreas GIRGENSOHN ,  Qiong LIU ,  Frank M. SHIPMAN, III ,  Lynn Donelle WILCOX

IPC分类号： G06F17/30

CPC分类号： G06F17/3002 ,  G06F17/30014

摘要： A method for generating content links between a first digital file and a second digital file by detecting a content feature of a first digital file segment of the first digital file during playback of the first digital file segment of the first digital file, searching an index of a plurality of content features for a plurality of segments including a second digital file segment of the second digital file, and dynamically generating a link between the first digital file one segment of the first digital file and the second digital file segment of the second digital file when a content feature of the first digital file segment of the first digital file is related to the content feature of the at least one segment of the second digital file.

摘要翻译： 一种用于通过在第一数字文件的第一数字文件段的重放期间检测第一数字文件的第一数字文件段的内容特征来产生第一数字文件和第二数字文件之间的内容链接的方法， 用于包括第二数字文件的第二数字文件段的多个段的多个内容特征，以及动态生成第一数字文件的第一数字文件一段与第二数字文件的第二数字文件段之间的链接 当第一数字文件的第一数字文件段的内容特征与第二数字文件的至少一个段的内容特征相关时。

公开(公告)号：US08423881B2

公开(公告)日：2013-04-16

申请号：US13204235

申请日：2011-08-05

申请人： Andreas Girgensohn ,  Chunyuan Liao ,  Qiong Liu ,  Lynn Donelle Wilcox ,  Frank M. Shipman, III

发明人： Andreas Girgensohn ,  Chunyuan Liao ,  Qiong Liu ,  Lynn Donelle Wilcox ,  Frank M. Shipman, III

IPC分类号： G06F17/00 ,  G06F17/20 ,  G06F17/21 ,  G06F17/22

CPC分类号： G06K9/00442 ,  G06K9/4609 ,  G06K9/6211

摘要： Systems and methods provide for determining a location and size of a visual link to digital media on physical media such as a paper document. An authoring tool for creating a link on a paper document, such as an Embedded Media Marker (EMM), identifies and scores other EMMs and related keypoints on the document to determine similarities between a newly-created EMM and other EMMs and keypoints on the paper document. The scores are visualized for a user on a display in order to position and size the newly-created EMM in a location on the paper document that will avoid confusion with other EMMs and related content. The location and size of the newly-created EMM may be automatically adjusted based on the scoring of the keypoints and related EMMs.

摘要翻译： 系统和方法提供用于确定物理介质（例如纸质文档）上的数字媒体的可视链接的位置和大小。 用于在诸如嵌入式媒体标记（EMM）之类的纸质文档上创建链接的创作工具识别和评分文档上的其他EMM和相关关键点，以确定新创建的EMM和其他EMM之间的相似性以及纸上的关键点 文件。 在显示器上为用户可视化分数，以便将新创建的EMM定位和尺寸在纸张文档上的位置，以避免与其他EMM和相关内容混淆。 可以基于关键点和相关EMM的评分自动调整新创建的EMM的位置和大小。

公开(公告)号：US20130024819A1

公开(公告)日：2013-01-24

申请号：US13185414

申请日：2011-07-18

申请人： Eleanor Rieffel ,  Donald Kimber ,  Chunyuan Liao ,  Qiong Liu

发明人： Eleanor Rieffel ,  Donald Kimber ,  Chunyuan Liao ,  Qiong Liu

IPC分类号： G06F3/048

CPC分类号： G06F3/011 ,  G06F3/017

摘要： Systems and methods provide for gesture-based creation of interactive hotspots in a real world environment. A gesture made by a user in a three-dimensional space in the real world environment is detected by a motion capture device such as a camera, and the gesture is then identified and interpreted to create a “hotspot,” which is a region in three-dimensional space through which a user interacts with a computer system. The gesture may indicate that the hotspot is anchored to the real world environment or anchored to an object in the real world environment. The functionality of the hotspot is defined in order to identify the type of gesture which will initiate the hotspot and associate the activation of the hotspot with an activity in the system, such as control of an application on a computer or an electronic device connected with the system.

摘要翻译： 系统和方法提供了在现实环境中基于姿态的交互式热点创建。 用户在真实世界环境中的三维空间中所做的手势由诸如相机的运动捕捉设备来检测，然后识别和解释手势以创建热点，该热点是三维的区域 用户通过其与计算机系统交互的空间。 手势可以指示热点被锚定到现实环境或锚定在现实环境中的对象。 定义热点的功能，以便识别将启动热点并将热点的激活与系统中的活动相关联的手势的类型，诸如在计算机上的应用的控制或者与 系统。

公开(公告)号：US08149273B2

公开(公告)日：2012-04-03

申请号：US12171273

申请日：2008-07-10

申请人： Qiong Liu ,  Ming Yang ,  Althea Turner

发明人： Qiong Liu ,  Ming Yang ,  Althea Turner

IPC分类号： A62B1/04 ,  H04N5/33 ,  G06K9/00 ,  A61B5/04

CPC分类号： A61B5/489 ,  A61B5/01 ,  A61B5/024

摘要： A system for measuring a pulse and respiratory rate from passive thermal video includes contour segmentation and tracking, clustering of informative pixels of interests, and robust dominant frequency component estimation. Contour segmentation is used to locate a blood vessel region to measure, after which all pixels in the nearby region are aligned across frames based on the segmentation's position, and scale in each frame. Spatial filtering is then performed to remove noise not related to heart beat and then non-linear filtering is performed on the temporal signal corresponding to each aligned pixel. The signal spectrum of each pixel is then feed to a clustering algorithm for outlier removal. Pixels in the largest cluster are then used to vote for the dominant frequency, and the median of the dominant frequency is output as the pulse rate.

摘要翻译： 用于从被动热视频测量脉搏和呼吸频率的系统包括轮廓分割和跟踪，兴趣信息像素的聚类和鲁棒的主频分量估计。 轮廓分割用于定位血管区域以测量，之后基于分割的位置在附近区域中的所有像素对准跨越帧，并且在每个帧中缩放。 然后执行空间滤波以去除与心跳不相关的噪声，然后对对应于每个对准的像素的时间信号执行非线性滤波。 然后将每个像素的信号频谱馈送到用于异常值去除的聚类算法。 最大簇中的像素然后用于投票主导频率，主频率的中值作为脉率输出。

公开(公告)号：US07995090B2

公开(公告)日：2011-08-09

申请号：US10629403

申请日：2003-07-28

申请人： Qiong Liu ,  Donald G Kimber ,  Jonathan T Foote ,  Chunyuan Liao ,  Patrick Chiu ,  Lynn Wilcox

发明人： Qiong Liu ,  Donald G Kimber ,  Jonathan T Foote ,  Chunyuan Liao ,  Patrick Chiu ,  Lynn Wilcox

IPC分类号： H04N7/15

CPC分类号： H04N7/147 ,  G06F19/00 ,  H04N7/15 ,  H04N21/4622

摘要： A method for exchanging information in a shared interactive environment, comprising selecting a first physical device in a first live video image wherein the first physical device has information associated with it, causing the information to be transferred to a second physical device in a second live video image wherein the transfer is brought about by manipulating a visual representation of the information, wherein the manipulation includes interacting with the first live video image and the second live video image, wherein the first physical device and the second physical device are part of the shared interactive environment, and wherein the first physical device and the second physical device are not the same.

摘要翻译： 一种用于在共享交互环境中交换信息的方法，包括：选择第一实时视频图像中的第一物理设备，其中所述第一物理设备具有与其相关联的信息，使得所述信息被传送到第二实时视频中的第二物理设备 图像，其中通过操纵所述信息的视觉表示来实现所述传送，其中所述操纵包括与所述第一实况视频图像和所述第二实况视频图像进行交互，其中所述第一物理设备和所述第二物理设备是所述共享交互的一部分 环境，并且其中所述第一物理设备和所述第二物理设备不相同。

公开(公告)号：US20110154174A1

公开(公告)日：2011-06-23

申请号：US12646841

申请日：2009-12-23

申请人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan ,  Bee Liew

发明人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan ,  Bee Liew

IPC分类号： G06F3/048 ,  G06F17/21

CPC分类号： G06F17/30879 ,  G06K19/06103

摘要： Embedded Media Markers (EMM) are optical-filter-like overlaid marks that can be printed on a part of a paper document that signify the existence of media associated with that part of the document. Users take a picture of an EMM-signified document patch using a cell phone camera, and the media associated with the EMM-signified document location is retrieved and displayed on the phone. Unlike bar codes, EMMs are nearly transparent and thus do not interfere with the document contents. Retrieval of media associated with an EMM is based on image local features of the captured EMM-signified document patch. A semi-automatically technique places an EMM at a location in a document, in such a way that the EMM encompasses sufficient identification features with minimal disturbance to the original document.

摘要翻译： 嵌入式媒体标记（EMM）是类似光学滤波器的重叠标记，可以打印在纸张文档的一部分上，表示存在与文档的该部分相关联的媒体。 用户使用手机摄像头拍摄EMM指定的文档补丁，并且将与EMM指定的文档位置相关联的媒体检索并显示在手机上。 与条形码不同，EMM几乎是透明的，因此不会干扰文档内容。 与EMM相关联的媒体的检索基于所捕获的EMM指示的文档补丁的图像本地特征。 半自动技术将EMM放置在文档中的位置，使得EMM包含足够的识别特征，同时对原始文档的干扰最小。

公开(公告)号：US20100331041A1

公开(公告)日：2010-12-30

申请号：US12459175

申请日：2009-06-26

申请人： Chunyuan Liao ,  Qiong Liu

发明人： Chunyuan Liao ,  Qiong Liu

IPC分类号： H04M1/00 ,  H04N7/18 ,  G06K9/46

CPC分类号： H04M1/72555 ,  G06K9/4671 ,  H04M2250/52

摘要： Method, device, system and framework for enabling token and point level operations on language independent paper documents through camera phone interface. Image descriptors from snapshots of document captured by the phone can be extracted by phone itself and transmitted to server. In another implementation, the descriptors are extracted by receiving server. The server is connected to database of high-quality images of the same document and matched high-quality patch is sent back to phone for user's viewing and manipulation. Modifications and annotations of high-quality patch are transmitted to database and stored. Motion detection is combined with image recognition to provide high quality images of regions of document being viewed by sweeping the phone. Capabilities include web-search, e-dictionary, or keyword finding for words in paper documents, copy-paste operations, constructing photo collages from portions of printed photos, and playing dynamic contents of printed presentation slides on display of camera phone.

摘要翻译： 方法，设备，系统和框架，通过相机手机界面启用与语言无关的纸质文档的令牌和点级操作。 由电话拍摄的文件快照的图像描述符可以通过电话本身提取并传输到服务器。 在另一个实现中，描述符由接收服务器提取。 服务器连接到同一文件的高质量图像的数据库，并将匹配的高质量补丁发回手机进行用户的查看和操作。 高质量补丁的修改和注释被传输到数据库并存储。 运动检测与图像识别结合，通过扫描电话提供正在观看的文档区域的高质量图像。 能力包括纸质文件中的网页搜索，电子词典或关键词查找，复印粘贴操作，从打印照片的部分构建照片拼贴，以及在相机手机的显示器上播放打印的幻灯片的动态内容。