公开(公告)号：US08423881B2

公开(公告)日：2013-04-16

申请号：US13204235

申请日：2011-08-05

申请人： Andreas Girgensohn ,  Chunyuan Liao ,  Qiong Liu ,  Lynn Donelle Wilcox ,  Frank M. Shipman, III

发明人： Andreas Girgensohn ,  Chunyuan Liao ,  Qiong Liu ,  Lynn Donelle Wilcox ,  Frank M. Shipman, III

IPC分类号： G06F17/00 ,  G06F17/20 ,  G06F17/21 ,  G06F17/22

CPC分类号： G06K9/00442 ,  G06K9/4609 ,  G06K9/6211

摘要： Systems and methods provide for determining a location and size of a visual link to digital media on physical media such as a paper document. An authoring tool for creating a link on a paper document, such as an Embedded Media Marker (EMM), identifies and scores other EMMs and related keypoints on the document to determine similarities between a newly-created EMM and other EMMs and keypoints on the paper document. The scores are visualized for a user on a display in order to position and size the newly-created EMM in a location on the paper document that will avoid confusion with other EMMs and related content. The location and size of the newly-created EMM may be automatically adjusted based on the scoring of the keypoints and related EMMs.

摘要翻译： 系统和方法提供用于确定物理介质（例如纸质文档）上的数字媒体的可视链接的位置和大小。 用于在诸如嵌入式媒体标记（EMM）之类的纸质文档上创建链接的创作工具识别和评分文档上的其他EMM和相关关键点，以确定新创建的EMM和其他EMM之间的相似性以及纸上的关键点 文件。 在显示器上为用户可视化分数，以便将新创建的EMM定位和尺寸在纸张文档上的位置，以避免与其他EMM和相关内容混淆。 可以基于关键点和相关EMM的评分自动调整新创建的EMM的位置和大小。

公开(公告)号：US09244923B2

公开(公告)日：2016-01-26

申请号：US13566084

申请日：2012-08-03

申请人： Matthew L. Cooper ,  Scott Carter ,  John Adcock ,  Andreas Girgensohn ,  Qiong Liu ,  Frank M. Shipman, III ,  Lynn Donelle Wilcox

发明人： Matthew L. Cooper ,  Scott Carter ,  John Adcock ,  Andreas Girgensohn ,  Qiong Liu ,  Frank M. Shipman, III ,  Lynn Donelle Wilcox

IPC分类号： G06F17/30

CPC分类号： G06F17/3002 ,  G06F17/30014

摘要： A method for generating content links between a first digital file and a second digital file by detecting a content feature of a first digital file segment of the first digital file during playback of the first digital file segment of the first digital file, searching an index of a plurality of content features for a plurality of segments including a second digital file segment of the second digital file, and dynamically generating a link between the first digital file one segment of the first digital file and the second digital file segment of the second digital file when a content feature of the first digital file segment of the first digital file is related to the content feature of the at least one segment of the second digital file.

摘要翻译： 一种用于通过在第一数字文件的第一数字文件段的重放期间检测第一数字文件的第一数字文件段的内容特征来产生第一数字文件和第二数字文件之间的内容链接的方法， 用于包括第二数字文件的第二数字文件段的多个段的多个内容特征，以及动态生成第一数字文件的第一数字文件一段与第二数字文件的第二数字文件段之间的链接 当第一数字文件的第一数字文件段的内容特征与第二数字文件的至少一个片段的内容特征相关时。

公开(公告)号：US09245043B2

公开(公告)日：2016-01-26

申请号：US12646841

申请日：2009-12-23

申请人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan ,  Bee Liew

发明人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan ,  Bee Liew

IPC分类号： G06F17/30 ,  G06K19/06

CPC分类号： G06F17/30879 ,  G06K19/06103

摘要： Embedded Media Markers (EMM) are optical-filter-like overlaid marks that can be printed on a part of a paper document that signify the existence of media associated with that part of the document. Users take a picture of an EMM-signified document patch using a cell phone camera, and the media associated with the EMM-signified document location is retrieved and displayed on the phone. Unlike bar codes, EMMs are nearly transparent and thus do not interfere with the document contents. Retrieval of media associated with an EMM is based on image local features of the captured EMM-signified document patch. A semi-automatically technique places an EMM at a location in a document, in such a way that the EMM encompasses sufficient identification features with minimal disturbance to the original document.

摘要翻译： 嵌入式媒体标记（EMM）是类似光学滤波器的重叠标记，可以打印在纸张文档的一部分上，表示存在与文档的该部分相关联的媒体。 用户使用手机摄像头拍摄EMM指定的文档补丁，并且将与EMM指定的文档位置相关联的媒体检索并显示在手机上。 与条形码不同，EMM几乎是透明的，因此不会干扰文档内容。 与EMM相关联的媒体的检索基于所捕获的EMM指示的文档补丁的图像本地特征。 半自动技术将EMM放置在文档中的位置，使得EMM包含足够的识别特征，同时对原始文档的干扰最小。

公开(公告)号：US08424751B2

公开(公告)日：2013-04-23

申请号：US12855253

申请日：2010-08-12

申请人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan

发明人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan

IPC分类号： G06F17/00 ,  G06K19/06

CPC分类号： G06F17/30879 ,  G06K19/06103

摘要： Embedded Media Barcode Links (EMBL), are optimally blended iconic barcode marks printed on paper documents that signify the existence of media associated with that part of the document. EMBLs are used for media retrieval with a camera phone. Users take a picture of an EMBL-signified document patch using a cell phone, and the media associated with the EMBL-signified document location is displayed on the phone. Unlike traditional bar code which requires an exclusive space, EMBLs are optimally blended with contents and thus have less interference with the original document layout and can be moved closer to a media associated location. Unlike Embedded Media Makers (EMM) which requires underlying document features for the marker identification, EMBL has no requirement to underlying features. Moreover, EMBL can take the advantage of users' knowledge to traditional barcode. Retrieval of media associated with an EMBL is based on the barcode identification of the captured EMBL.

摘要翻译： 嵌入式媒体条形码链接（EMBL）是打印在纸质文档上的最佳混合标志性条形码标记，表示存在与文档该部分相关的媒体。 EMBL用于使用相机手机进行媒体检索。 用户使用手机拍摄EMBL指定的文档补丁，并且与手机上显示与EMBL指定的文档位置相关联的媒体。 与需要独占空间的传统条形码不同，EMBL与内容最佳地混合，因此对原始文档布局的干扰较小，可以更靠近媒体关联位置。 不同于嵌入式媒体制造商（EMM），它需要标记识别的底层文档功能，EMBL不需要基础功能。 此外，EMBL可以利用用户的知识来传统的条形码。 检索与EMBL有关的媒体是基于所捕获的EMBL的条形码识别。

公开(公告)号：US20120037695A1

公开(公告)日：2012-02-16

申请号：US12855253

申请日：2010-08-12

申请人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan

发明人： Qiong Liu ,  Chunyuan Liao ,  Lynn Wilcox ,  Anthony Dunnigan

IPC分类号： G06F17/00 ,  G06F17/24 ,  G06F3/048 ,  G06K19/06

CPC分类号： G06F17/30879 ,  G06K19/06103

摘要： Embedded Media Barcode Links (EMBL), are optimally blended iconic barcode marks printed on paper documents that signify the existence of media associated with that part of the document. EMBLs are used for media retrieval with a camera phone. Users take a picture of an EMBL-signified document patch using a cell phone, and the media associated with the EMBL-signified document location is displayed on the phone. Unlike traditional bar code which requires an exclusive space, EMBLs are optimally blended with contents and thus have less interference with the original document layout and can be moved closer to a media associated location. Unlike Embedded Media Makers (EMM) which requires underlying document features for the marker identification, EMBL has no requirement to underlying features. Moreover, EMBL can take the advantage of users' knowledge to traditional barcode. Retrieval of media associated with an EMBL is based on the barcode identification of the captured EMBL.

摘要翻译： 嵌入式媒体条形码链接（EMBL）是打印在纸质文档上的最佳混合标志性条形码标记，表示存在与文档该部分相关的媒体。 EMBL用于使用相机手机进行媒体检索。 用户使用手机拍摄EMBL指定的文档补丁，并且与手机上显示与EMBL指定的文档位置相关联的媒体。 与需要独占空间的传统条形码不同，EMBL与内容最佳地混合，因此对原始文档布局的干扰较小，可以更靠近媒体关联位置。 不同于嵌入式媒体制造商（EMM），它需要标记识别的底层文档功能，EMBL不需要基础功能。 此外，EMBL可以利用用户的知识来传统的条形码。 检索与EMBL有关的媒体是基于所捕获的EMBL的条形码识别。

公开(公告)号：US20050160368A1

公开(公告)日：2005-07-21

申请号：US10760671

申请日：2004-01-21

申请人： Qiong Liu ,  Donald Kimber ,  Patrick Chiu ,  Surapong Lertsithichai ,  Chunyuan Liao ,  Hangjin Zhang

发明人： Qiong Liu ,  Donald Kimber ,  Patrick Chiu ,  Surapong Lertsithichai ,  Chunyuan Liao ,  Hangjin Zhang

IPC分类号： G06F3/048 ,  G06F3/00 ,  G06F17/21 ,  G06F17/24 ,  G11B27/00

CPC分类号： G06F17/211 ,  G06F3/0481 ,  G06F3/04847 ,  G06F2203/04803 ,  G06F2203/04806

摘要： A system and method for authoring a media presentation including a media presentation environment representation having a portion defined as a hot spot associated with a media presentation device. Various embodiments include a hyper-slide listing portion, a media presentation authoring portion, and/or a media presentation device listing portion. Various embodiments include an integrated presentation authoring preview environment. The method includes selecting a physical device for a presentation unit in the media presentation environment, manipulating a visual representation of the presentation unit, recording a display of the presentation unit, and previewing the presentation in an augmented reality environment, a virtual reality environment, or both. Various embodiments operate with a plurality of types of media presentation devices and a plurality of each type of device.

摘要翻译： 一种用于创作媒体呈现的系统和方法，包括具有被定义为与媒体呈现设备相关联的热点的部分的媒体呈现环境表示。 各种实施例包括超级幻灯片列表部分，媒体呈现创作部分和/或媒体呈现设备列表部分。 各种实施例包括集成的呈现创作预览环境。 该方法包括：在媒体呈现环境中选择用于呈现单元的物理设备，操纵演示单元的视觉表示，记录演示单元的显示，以及在增强现实环境，虚拟现实环境中预览演示，或 都。 各种实施例用多种类型的媒体呈现装置和多种每种类型的装置进行操作。

公开(公告)号：US08126155B2

公开(公告)日：2012-02-28

申请号：US10612429

申请日：2003-07-02

申请人： Qiong Liu ,  Donald G. Kimber ,  Jonathan T. Foote ,  Chunyuan Liao ,  John E. Adcock

发明人： Qiong Liu ,  Donald G. Kimber ,  Jonathan T. Foote ,  Chunyuan Liao ,  John E. Adcock

IPC分类号： H04R29/00 ,  H04N7/18 ,  H04N5/232

CPC分类号： H04H60/04

摘要： An audio device management system (ADMS) manages remote audio devices via user selections in video links. The system enhances audio acquisition quality by receiving and processing human suggestions, forming customized two-way audio links according to user requests, and learning audio pickup strategies and camera management strategies from user operations. The ADMS control interface for a remote user provides a multi-window GUI that provides an overview window and selection display window. The ADMS provides users with more flexibility to enhance audio signals according to their needs and makes it more convenient to form customized two-way audio links without requiring users to remember a list of phone numbers. The ADMS also automatically manages available microphones for audio pickup based on microphone sound quality and the system's past experience when users monitor a structured audio environment without explicitly expressing their attentions in the video window.

摘要翻译： 音频设备管理系统（ADMS）通过视频链路中的用户选择来管理远程音频设备。 该系统通过接收和处理人的建议，根据用户要求形成定制的双向音频链接，以及从用户操作学习音频拾取策略和相机管理策略来提高音频采集质量。 远程用户的ADMS控制界面提供了一个提供概览窗口和选择显示窗口的多窗口GUI。 ADMS为用户提供了更多的灵活性，可根据需要增强音频信号，并使其更方便地形成定制的双向音频链接，而不需要用户记住电话号码列表。 ADMS还可以自动管理可用的麦克风，用于基于麦克风音质的音频拾音，以及当用户监视结构化音频环境而不明确表达其在视频窗口中的注意时，系统的过去体验。

公开(公告)号：US08855421B2

公开(公告)日：2014-10-07

申请号：US13093661

申请日：2011-04-25

申请人： Xin Yang ,  Qiong Liu ,  Chunyuan Liao

发明人： Xin Yang ,  Qiong Liu ,  Chunyuan Liao

IPC分类号： G06K9/00 ,  G06K9/68

CPC分类号： G06K9/00671 ,  G06K9/6857

摘要： Methods and apparatuses for identifying an image based on Embedded Media Marker (EMM) identification. A hierarchal comparison including a first coarse comparison and a second refining comparison is used. The first coarse comparison compares an image with an EMM to images in a database at a low resolution. The results are fed to the second refining comparison, which conducts a comparison at a higher resolution than the first coarse comparison. By utilizing this hierarchical comparison approach, it is possible to identify the image with fewer false positives.

摘要翻译： 基于嵌入式媒体标记（EMM）识别图像的方法和装置。 使用包括第一粗略比较和第二精炼比较的层次比较。 第一个粗略比较将图像与EMM相比较，以低分辨率将数据库中的图像进行比较。 将结果输入到第二精炼比较，其比以比第一粗略比较更高的分辨率进行比较。 通过利用这种分层比较方法，可以用较少的假阳性识别图像。

公开(公告)号：US08126965B2

公开(公告)日：2012-02-28

申请号：US11712025

申请日：2007-02-28

申请人： Chang Hu ,  Qiong Liu ,  Xuemin Liu ,  Paul P. McEvoy ,  Chunyuan Liao

发明人： Chang Hu ,  Qiong Liu ,  Xuemin Liu ,  Paul P. McEvoy ,  Chunyuan Liao

IPC分类号： G06F15/16 ,  G06K9/60 ,  G06K9/18 ,  G06K19/06 ,  G06K7/10

CPC分类号： G06F3/03545 ,  G06F3/0321 ,  G06F3/04883

摘要： The present invention provides a paper-based meeting service management tool for meeting support functions. The paper-based tool includes a digital pen that can be used to make strokes which can be transmitted from the digital pen to services that provide the meeting support functions. The paper-based tool also includes digital paper that has an underlying image pattern. The digital pen can locate itself on the digital paper by recognizing underlying dot patterns and transmitting the location information to a computer through a Bluetooth connection.

摘要翻译： 本发明提供了一种用于满足支持功能的纸质会议服务管理工具。 基于纸张的工具包括一个数字笔，可用于制作可从数字笔传送到提供会议支持功能的服务的笔画。 纸质工具还包括具有底层图像图案的数字纸。 数字笔可以通过识别底层点图案并通过蓝牙连接将位置信息发送到计算机来定位在数字纸上。

公开(公告)号：US20120042288A1

公开(公告)日：2012-02-16

申请号：US12857497

申请日：2010-08-16

申请人： Chunyuan LIAO ,  Hao Tang ,  Qiong Liu ,  Patrick Chiu ,  Francine Chen

发明人： Chunyuan LIAO ,  Hao Tang ,  Qiong Liu ,  Patrick Chiu ,  Francine Chen

IPC分类号： G06F3/033 ,  H04N5/225

CPC分类号： H04N1/00241 ,  G06F3/017 ,  H04N1/00129 ,  H04N1/195 ,  H04N1/19594 ,  H04N2201/0081 ,  H04N2201/0436

摘要： Systems and methods provide for mixed use of physical documents and a computer, and more specifically provide for detailed interactions with fine-grained content of physical documents that are integrated with operations on a computer to provide for improved user interactions between the physical documents and the computer. The system includes a camera which processes the physical documents and detects gestures made by a user with respect to the physical documents, a projector which provides visual feedback on the physical document, and a computer with a display to coordinate the interactions of the user with the computer and the interactions of the user with the physical document. The system, which can be portable, is capable of detecting interactions with fine-grained content of the physical document and translating interactions at the physical document with the computer display, and vice versa.

摘要翻译： 系统和方法提供物理文档和计算机的混合使用，并且更具体地提供与物理文档的细粒度内容的详细交互，其与计算机上的操作集成以提供物理文档和计算机之间的改进的用户交互 。 该系统包括处理物理文档并相对于物理文档检测由用户做出的手势的相机，提供对物理文档的视觉反馈的投影仪，以及具有显示器的计算机，以协调用户与 计算机和用户与物理文档的交互。 可以携带的系统能够检测与物理文档的细粒度内容的交互，并且利用计算机显示器在物理文档中翻译交互，反之亦然。