公开(公告)号：US07236632B2

公开(公告)日：2007-06-26

申请号：US10412757

申请日：2003-04-11

申请人： Berna Erol ,  Jonathan J. Hull ,  Dar-Shyang Lee

发明人： Berna Erol ,  Jonathan J. Hull ,  Dar-Shyang Lee

IPC分类号： G06K9/68

CPC分类号： G06F17/30256 ,  G06K9/00442 ,  G06T7/97

摘要： Automated techniques for comparing contents of images. For a given image (referred to as an “input image”), a set of images (referred to as “a set of candidate images”) are processed to determine if the set of candidate images comprises an image whose contents or portions thereof match contents included in a region of interest in the input image.

摘要翻译： 用于比较图像内容的自动化技术。 对于给定图像（称为“输入图像”），处理一组图像（称为“一组候选图像”），以确定候选图像的集合是否包括其内容或部分匹配的图像 包含在输入图像中的感兴趣区域中的内容。

公开(公告)号：US10073859B2

公开(公告)日：2018-09-11

申请号：US14746663

申请日：2015-06-22

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

IPC分类号： G06F17/30 ,  G06F21/78 ,  G06F21/80 ,  G06K9/00 ,  G06K9/22 ,  G06K9/72 ,  G06F17/22 ,  G06K9/62 ,  G06T11/60 ,  G06F17/24

CPC分类号： G06F16/583 ,  G06F16/955 ,  G06F17/22 ,  G06F17/2205 ,  G06F17/241 ,  G06F21/78 ,  G06F21/80 ,  G06K9/00463 ,  G06K9/00483 ,  G06K9/228 ,  G06K9/6202 ,  G06K9/72 ,  G06K9/723 ,  G06K2209/01 ,  G06T11/60

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a media document that includes media of at least two types (e.g., printed paper as a first medium and digital content and/or web link as a second medium). The MMR system provides mechanisms for forming a media document that includes media of at least two types, such as printed paper as a first medium and a digital photograph, digital movie, digital audio file, or web link as a second medium. Furthermore, the MMR system facilitates business methods that take advantage of the combination of a portable electronic device, such as a cellular camera phone, and a paper document.

公开(公告)号：US20150139540A1

公开(公告)日：2015-05-21

申请号：US14604619

申请日：2015-01-23

申请人： Jorge Moraleda ,  Berna Erol ,  Jonathan J. Hull

发明人： Jorge Moraleda ,  Berna Erol ,  Jonathan J. Hull

IPC分类号： G06F17/30 ,  G06K9/62 ,  G06K9/80 ,  G06K9/00

CPC分类号： G06F17/30247 ,  G06F17/3028 ,  G06F17/30858 ,  G06F17/30876 ,  G06K9/00671 ,  G06K9/00973 ,  G06K9/00993

摘要： An MMR system for searching across multiple indexes comprises a plurality of mobile devices, a pre-processing server or MMR gateway, and an MMR matching unit, and may include an MMR publisher. The MMR matching unit receives an image from the pre-processing server or MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page, and the location on the page. The MMR matching unit includes a distributor for distributing the image to corresponding content type specific index tables and an integrator for integrating recognition results. The result is returned to the mobile device via the pre-processing server or MMR gateway. The techniques described herein also include a number of novel methods including a method for processing content-type specific image queries and for processing queries across multiple indexes.

摘要翻译： 用于在多个索引上搜索的MMR系统包括多个移动设备，预处理服务器或MMR网关以及MMR匹配单元，并且可以包括MMR发布者。 MMR匹配单元从预处理服务器或MMR网关接收图像，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 MMR匹配单元包括用于将图像分发到相应的内容类型特定索引表的分发器和用于集成识别结果的积分器。 结果通过预处理服务器或MMR网关返回到移动设备。 本文描述的技术还包括许多新颖的方法，包括用于处理内容类型特定图像查询并且用于跨多个索引处理查询的方法。

公开(公告)号：US08868555B2

公开(公告)日：2014-10-21

申请号：US12210532

申请日：2008-09-15

申请人： Berna Erol ,  Emilio R. Antunez ,  Landry Huet ,  Jonathan J. Hull ,  Jorge Moraleda

发明人： Berna Erol ,  Emilio R. Antunez ,  Landry Huet ,  Jonathan J. Hull ,  Jorge Moraleda

IPC分类号： G06F17/30 ,  H04N1/00 ,  G06K9/62 ,  G06K9/00 ,  G06K9/32

CPC分类号： G06F17/30247 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/00993 ,  G06K9/6256 ,  G06K2009/3291 ,  H04N1/00307 ,  Y10S707/915

摘要： A MMR system for newspaper publishing comprises a plurality of mobile devices, an MMR gateway, an MMR matching unit and an MMR publisher. The MMR matching unit receives an image query from the MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page and the location on the page. The MMR system also includes a quality predictor as a plug-in installed on the mobile device to filter images before they are included as part of a retrieval request or as part of the MMR matching unit. The quality predictor comprises an input for receiving recognition algorithm information, a vector calculator, a score generator and a scoring module. The quality predictor receives as inputs an image query, context information and device parameters, and generates an outputs a recognizability score. The present invention also includes a method for generating robustness features.

摘要翻译： 用于报纸出版的MMR系统包括多个移动设备，MMR网关，MMR匹配单元和MMR发布者。 MMR匹配单元从MMR网关接收图像查询，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 MMR系统还包括安装在移动设备上的插件的质量预测器，以在作为检索请求的一部分被包括在内的过滤图像或者作为MMR匹配单元的一部分。 质量预测器包括用于接收识别算法信息的输入，向量计算器，得分生成器和评分模块。 质量预测器作为输入接收图像查询，上下文信息和设备参数，并产生可识别得分的输出。 本发明还包括一种用于产生鲁棒性特征的方法。

公开(公告)号：US08805929B2

公开(公告)日：2014-08-12

申请号：US11158315

申请日：2005-06-20

申请人： Berna Erol ,  Jonathan J. Hull ,  Dar-Shyang Lee

发明人： Berna Erol ,  Jonathan J. Hull ,  Dar-Shyang Lee

IPC分类号： G06F15/16

CPC分类号： G06F17/30884

摘要： Techniques for annotating or bookmarking digital information. The digital information is annotated based upon events determined from the digital information. The digital information that is annotated may comprise one or more types of information including but not restricted to video information, audio information, images, documents, slides information, whiteboard information, notes information, and the like.

摘要翻译： 技术注释或书签数字信息。 数字信息基于从数字信息确定的事件进行注释。 注释的数字信息可以包括一种或多种类型的信息，包括但不限于视频信息，音频信息，图像，文档，幻灯片信息，白板信息，笔记信息等。

公开(公告)号：US20120257237A1

公开(公告)日：2012-10-11

申请号：US13494008

申请日：2012-06-11

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Jorge Moraleda ,  Ichiro Sakikawa ,  Daniel G. Van Olst

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Jorge Moraleda ,  Ichiro Sakikawa ,  Daniel G. Van Olst

IPC分类号： G06K15/02

CPC分类号： G06F17/30247 ,  G06F17/30011 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/00979

摘要： An MMR system for publishing comprises a plurality of mobile devices, an MMR gateway, an MMR matching unit, and an MMR publisher. A computer includes a document authoring application, plug-in, and printer driver. The MMR matching unit receives an image query from the MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page and the location on the page. The list of results and links are sent back to the MMR gateway for presentation on the mobile device. The present invention also includes a number of novel methods including a method for capturing symbolic information from documents and for capturing printer dll functions.

摘要翻译： 用于发布的MMR系统包括多个移动设备，MMR网关，MMR匹配单元和MMR发布者。 计算机包括文档创作应用程序，插件和打印机驱动程序。 MMR匹配单元从MMR网关接收图像查询，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 结果和链接列表将发送回MMR网关，以便在移动设备上进行演示。 本发明还包括许多新颖的方法，包括用于从文档捕获符号信息和捕获打印机dll功能的方法。

公开(公告)号：US08201076B2

公开(公告)日：2012-06-12

申请号：US12253815

申请日：2008-10-17

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Jorge Moraleda ,  Ichiro Sakikawa ,  Daniel G. Van Olst

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Jorge Moraleda ,  Ichiro Sakikawa ,  Daniel G. Van Olst

IPC分类号： G06F17/00

CPC分类号： G06F17/30247 ,  G06F17/30011 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/00979

摘要： An MMR system for publishing comprises a plurality of mobile devices, an MMR gateway, an MMR matching unit, and an MMR publisher. A computer includes a document authoring application, plug-in, and printer driver. The MMR matching unit receives an image query from the MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page and the location on the page. The list of results and links are sent back to the MMR gateway for presentation on the mobile device. The present invention also includes a number of novel methods including a method for capturing symbolic information from documents and for capturing printer dll functions.

摘要翻译： 用于发布的MMR系统包括多个移动设备，MMR网关，MMR匹配单元和MMR发布者。 计算机包括文档创作应用程序，插件和打印机驱动程序。 MMR匹配单元从MMR网关接收图像查询，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 结果和链接列表将发送回MMR网关，以便在移动设备上进行演示。 本发明还包括许多新颖的方法，包括用于从文档捕获符号信息和捕获打印机dll功能的方法。

公开(公告)号：US07920759B2

公开(公告)日：2011-04-05

申请号：US11461049

申请日：2006-07-31

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

IPC分类号： G06K9/54 ,  H04N1/40

CPC分类号： G06F17/3002 ,  G06F17/30047

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types. In one embodiment of the present invention, the MMR system includes an action processor and method, and MMR documents with an associated action. The MMR document structure specifies different actions for different MMR documents combined with the ability to create any number of MMR documents for a particular location on any media, which allows the MMR architecture to serve as a universal trigger or initiator for additional processing. In another embodiment, the MMR system, in particular MMR recognition and the input/output capabilities of the capture device, are used as a control mechanism for a third party system.

摘要翻译： 公开了混合媒体现实（MMR）系统及其相关技术。 MMR系统提供用于形成包括至少两种类型的介质的混合介质文档的机制。 在本发明的一个实施例中，MMR系统包括动作处理器和方法以及具有相关动作的MMR文档。 MMR文档结构指定不同的MMR文档的不同动作，以及为任何媒体上的特定位置创建任意数量的MMR文档的能力，这允许MMR架构作为通用触发器或启动器进行附加处理。 在另一个实施例中，MMR系统，特别是MMR识别和捕获设备的输入/输出能力被用作第三方系统的控制机制。

公开(公告)号：US07779355B1

公开(公告)日：2010-08-17

申请号：US10813901

申请日：2004-03-30

申请人： Berna Erol ,  Jonathan J. Hull ,  Jamey Graham

发明人： Berna Erol ,  Jonathan J. Hull ,  Jamey Graham

IPC分类号： G06F17/00

CPC分类号： G06F17/30253

摘要： Techniques for creating a composite image are provided. The techniques include receiving an electronic representation of a paper document. Features in the electronic representation are then extracted and compared to recorded information to determine matching information. For example, the matching information may be presentations and/or pages in the recorded information. Information is then determined based on the matching information and the received electronic representation. The composite electronic representation is then created using the determined information.

摘要翻译： 提供了创建合成图像的技术。 这些技术包括接收纸质文件的电子表示。 然后提取电子表示中的特征并将其与记录的信息进行比较以确定匹配信息。 例如，匹配信息可以是记录信息中的呈现和/或页面。 然后基于匹配信息和接收到的电子表示来确定信息。 然后使用确定的信息创建复合电子表示。

公开(公告)号：US07689712B2

公开(公告)日：2010-03-30

申请号：US10722834

申请日：2003-11-26

申请人： Dar-Shyang Lee ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Jonathan J. Hull

发明人： Dar-Shyang Lee ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Jonathan J. Hull

IPC分类号： G06F15/173

CPC分类号： G06F17/241

摘要： Techniques to improve a user's note-taking experience. While taking notes for a presentation, a user can request one or more portions of information recorded during the presentation to be inserted into the user's notes document. User interfaces are provided that enable a user to specify which portions of the recorded information are to be inserted into the user's notes document. User information requests that cannot be immediately processed are stored or cached in the notes document for later processing. These cached requests are processed and the requested information inserted into the user's notes document at a later time.

摘要翻译： 提高用户笔记体验的技巧。 在为演示提供笔记的同时，用户可以请求在演示期间记录的信息的一个或多个部分被插入到用户的笔记文档中。 提供了用户界面，使用户能够指定将记录的信息的哪些部分插入到用户的笔记文档中。 无法立即处理的用户信息请求将被存储或缓存在备注文档中，以备后续处理。 处理这些缓存的请求，并在稍后时间将请求的信息插入到用户的笔记文档中。