公开(公告)号：US09063953B2

公开(公告)日：2015-06-23

申请号：US12719437

申请日：2010-03-08

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Peter E. Hart ,  Dar-Shyang Lee ,  Kurt Piersol

IPC分类号： G06F17/30 ,  G06F21/78 ,  G06F21/80 ,  G06K9/00 ,  G06K9/22 ,  G06K9/72

CPC分类号： G06F17/30247 ,  G06F17/22 ,  G06F17/2205 ,  G06F17/241 ,  G06F17/30876 ,  G06F21/78 ,  G06F21/80 ,  G06K9/00463 ,  G06K9/00483 ,  G06K9/228 ,  G06K9/6202 ,  G06K9/72 ,  G06K9/723 ,  G06K2209/01 ,  G06T11/60

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types (e.g., printed paper as a first medium and digital content and/or web link as a second medium). In one particular embodiment, the MMR system includes an MMR user, a MMR computer, a user printer that produces a printed document, a networked media server, an office portal, a service provider server, an electronic display that is electrically connected to a set-top box, a document scanner, a network, a capture device, a cellular infrastructure, wireless fidelity (Wi-Fi) technology, Bluetooth® technology, infrared (IR) technology, wired technology, and a geo location mechanism. The MMR system of the present invention provides mechanisms for forming a mixed media document that includes media of at least two types, such as printed paper as a first medium and a digital photograph, digital movie, digital audio file, or web link as a second medium. Furthermore, the MMR system of the present invention facilitates business methods that take advantage of the combination of a portable electronic device, such as a cellular camera phone, and a paper document.

摘要翻译： 公开了混合媒体现实（MMR）系统及其相关技术。 MMR系统提供用于形成包括至少两种类型的媒体（例如，作为第一媒体的打印纸和作为第二媒体的数字内容和/或web链接）的混合媒体文档的机制。 在一个特定实施例中，MMR系统包括MMR用户，MMR计算机，产生打印文档的用户打印机，网络媒体服务器，办公室门户，服务提供商服务器，电连接到一组 - 文件扫描器，网络，捕获设备，蜂窝基础设施，无线保真（Wi-Fi）技术，蓝牙技术，红外（IR）技术，有线技术和地理定位机制）。 本发明的MMR系统提供用于形成混合媒体文档的机制，该混合媒体文档包括至少两种类型的媒体，例如作为第一媒体的打印纸和数字照片，数字电影，数字音频文件或web链接作为第二媒体 中。 此外，本发明的MMR系统有助于利用便携式电子设备（诸如蜂窝摄像机电话）和纸质文档的组合的业务方法。

公开(公告)号：US08156427B2

公开(公告)日：2012-04-10

申请号：US11461143

申请日：2006-07-31

申请人： Jamey Graham ,  Berna Erol ,  Peter E. Hart ,  Jonathan J. Hull

发明人： Jamey Graham ,  Berna Erol ,  Peter E. Hart ,  Jonathan J. Hull

IPC分类号： G06F17/00

CPC分类号： G06K9/00442 ,  G06F17/30011

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types (e.g., printed paper as a first medium and digital content and/or web link as a second medium). In one embodiment, an MMR document is retrieved based on recognition of a paper document. Responsive to a comparison of the paper document and a virtual multimedia document, a set of actions is displayed to a user. Responsive to a user selection, the user-selected action is performed. In another embodiment, a captured list of names is used to assist a user with labeling a media file.

摘要翻译： 公开了混合媒体现实（MMR）系统及其相关技术。 MMR系统提供用于形成包括至少两种类型的媒体（例如，作为第一媒体的打印纸和作为第二媒体的数字内容和/或web链接）的混合媒体文档的机制。 在一个实施例中，基于对纸质文档的识别来检索MMR文档。 响应于纸张文档和虚拟多媒体文档的比较，向用户显示一组动作。 响应于用户选择，执行用户选择的动作。 在另一个实施例中，捕获的名称列表用于帮助用户标记媒体文件。

公开(公告)号：US07812986B2

公开(公告)日：2010-10-12

申请号：US11461075

申请日：2006-07-31

申请人： Jamey Graham ,  Kevin Ridout ,  Stephen A. Weyl ,  Jonathan J. Hull ,  Peter E. Hart ,  Kurt Piersol

发明人： Jamey Graham ,  Kevin Ridout ,  Stephen A. Weyl ,  Jonathan J. Hull ,  Peter E. Hart ,  Kurt Piersol

IPC分类号： G06F15/00 ,  H04N7/00 ,  H04M11/00

CPC分类号： H04N1/32133 ,  G06K9/325 ,  G06K9/4642 ,  G06K9/726 ,  G06K2209/01 ,  H04N1/34 ,  H04N2201/3249 ,  H04N2201/3269 ,  H04N2201/3273 ,  H04N2201/3274

摘要： A mixed media reality (MMR) system includes an MMR user, a MMR computer, a user printer that produces a printed document, a networked media server, an office portal, a service provider server, an electronic display that is electrically connected to a set-top box, a document scanner, a network, a capture device, a cellular infrastructure, wireless fidelity (Wi-Fi) technology, Bluetooth® technology, infrared (IR) technology, wired technology, and a geo location mechanism. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types, such as printed paper as a first medium and a digital photograph, digital movie, digital audio file, or web link as a second medium. Furthermore, the MMR system facilitates business methods that take advantage of the combination of a portable electronic device, voice mail or email, and a paper document.

摘要翻译： 混合媒体现实（MMR）系统包括MMR用户，MMR计算机，产生打印文档的用户打印机，联网媒体服务器，办公室门户，服务提供者服务器，电连接到一组 - 文件扫描器，网络，捕获设备，蜂窝基础设施，无线保真（Wi-Fi）技术，蓝牙技术，红外（IR）技术，有线技术和地理定位机制）。 MMR系统提供用于形成混合媒体文档的机制，该混合媒体文档包括至少两种类型的媒体，例如作为第一媒体的打印纸和作为第二媒体的数字照片，数字电影，数字音频文件或网络链接。 此外，MMR系统便于利用便携式电子设备，语音邮件或电子邮件和纸质文档的组合的业务方法。

公开(公告)号：US07528977B2

公开(公告)日：2009-05-05

申请号：US10814846

申请日：2004-03-30

申请人： Jonathan J. Hull ,  Peter E. Hart ,  Jamey Graham

发明人： Jonathan J. Hull ,  Peter E. Hart ,  Jamey Graham

IPC分类号： G06F3/12 ,  G06F15/00 ,  G06F1/00

CPC分类号： G06F1/1632

摘要： A printing system enables the printing of multimedia received from a device that is docked on the printer. Based on received multimedia data, the printing system produces a paper or other printed output as well as a related electronic output. Together, the printed and electronic outputs provide a representation of the multimedia. The printer is also capable of communicating and controlling the functionality of the peripheral device. Depending on the desired application for the printer, the printer may include any combination of mechanisms for receiving media data, printing the printed output, and producing the electronic output.

摘要翻译： 打印系统能够打印从停靠在打印机上的设备接收到的多媒体。 基于接收到的多媒体数据，打印系统产生纸张或其他打印输出以及相关的电子输出。 印刷和电子输出一起提供多媒体的表示。 打印机还能够通信和控制外围设备的功能。 根据打印机的期望应用，打印机可以包括用于接收媒体数据，打印打印输出和产生电子输出的机构的任何组合。

公开(公告)号：US07528976B2

公开(公告)日：2009-05-05

申请号：US10813847

申请日：2004-03-30

申请人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt W. Piersol

发明人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt W. Piersol

IPC分类号： G06K15/00 ,  G06F3/12 ,  G06F15/80 ,  G06F15/177

CPC分类号： G06K15/00 ,  G06K15/005 ,  G06K15/007 ,  G10H2210/086 ,  G10H2240/056

摘要： A printing system for time-based data enables the printing of time-based media by sharing processing resources on a printer and on an external media processing system such as an external service, for example, a web service. The media processing may similarly be shared, as determined by a resource allocation module, between the printer and an external media processing system coupled via a communication interface to the printer or via a network. An example of such an external media processing system is an external device such as a personal computer or an external service such as a web service. A stand-alone version of the printer with embedded time based data in multiple media is described with a display and user interface so that a user can walk up to the printer and perform multimedia processing at the printer. The stand alone version has a network connection or other communication interface so that an external service or device can interface directly with the printer in performing media processing or a user can interface with the external service or device directly through the printer.

摘要翻译： 用于基于时间的数据的打印系统使得能够通过在打印机和外部媒体处理系统（例如外部服务，例如web服务）上共享处理资源来打印基于时间的媒体。 媒体处理可以类似地由资源分配模块确定，在打印机和通过通信接口耦合到打印机或经由网络耦合的外部媒体处理系统之间共享。 这种外部媒体处理系统的一个例子是诸如个人计算机的外部设备或诸如web服务的外部服务。 使用显示和用户界面描述具有多媒体中嵌入的基于时间的数据的打印机的独立版本，使得用户可以走到打印机并在打印机处执行多媒体处理。 独立版本具有网络连接或其他通信接口，使得外部服务或设备可以在执行媒体处理时直接与打印机接口，或者用户可以通过打印机直接与外部服务或设备进行接口。

公开(公告)号：US07511846B2

公开(公告)日：2009-03-31

申请号：US10814931

申请日：2004-03-30

申请人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt Piersol

发明人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt Piersol

IPC分类号： G06F3/12

CPC分类号： B41J3/50

摘要： A multifunction printer enables the printing of time-based media. Based on received time-based media data, the printer produces a paper or other printed output as well as a related electronic output. Together, the printed and electronic outputs provide a representation of the time-based media. Depending on the desired application for the printer, the printer may include any combination of mechanisms for receiving media data, printing the printed output, and producing the electronic output.

摘要翻译： 多功能打印机能够打印基于时间的媒体。 基于接收的基于时间的媒体数据，打印机产生纸张或其他打印输出以及相关的电子输出。 印刷和电子输出一起提供了基于时间的媒体的表示。 根据打印机的期望应用，打印机可以包括用于接收媒体数据，打印打印输出和产生电子输出的机构的任何组合。

公开(公告)号：US07508535B2

公开(公告)日：2009-03-24

申请号：US10814845

申请日：2004-03-30

申请人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt W. Piersol

发明人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt W. Piersol

IPC分类号： G06F3/12 ,  G06F15/80 ,  G06K15/00

CPC分类号： H04N1/00283 ,  H04N1/00281

摘要： A printing system for time-based data enables the printing of time-based media by sharing processing resources on a printer and on an external media processing system such as an external service, for example, a web service. The media processing may similarly be shared, as determined by a resource allocation module, or as indicated by a user via a user interface, between the printer and an external media processing system coupled via a communication interface to the printer or via a network. An example of such an external media processing system is an external device such as a personal computer or an external service such as a web service. A stand-alone version of the printer with embedded time based data in multiple media is described with a display and user interface so that a user can walk up to the printer and perform multimedia processing at the printer. The stand alone version has a network connection or other communication interface so that an external service or device can interface directly with the printer in performing media processing or a user can interface with the external service or device directly through the printer.

摘要翻译： 用于基于时间的数据的打印系统使得能够通过在打印机和外部媒体处理系统（例如外部服务，例如web服务）上共享处理资源来打印基于时间的媒体。 媒体处理可以类似地由资源分配模块确定，或者由用户经由用户界面指示在打印机和通过通信接口耦合到打印机或经由网络耦合的外部媒体处理系统之间共享。 这种外部媒体处理系统的一个例子是诸如个人计算机的外部设备或诸如web服务的外部服务。 使用显示和用户界面描述具有多媒体中嵌入的基于时间的数据的打印机的独立版本，使得用户可以走到打印机并在打印机处执行多媒体处理。 独立版本具有网络连接或其他通信接口，使得外部服务或设备可以在执行媒体处理时直接与打印机接口，或者用户可以通过打印机直接与外部服务或设备进行接口。

公开(公告)号：US07505163B2

公开(公告)日：2009-03-17

申请号：US10814500

申请日：2004-03-30

申请人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt Piersol

发明人： Peter E. Hart ,  Jonathan J. Hull ,  Jamey Graham ,  Kurt Piersol

IPC分类号： G06F3/00 ,  G06F3/12 ,  G06F15/16

CPC分类号： H04N1/00339 ,  H04N1/00222 ,  H04N1/00413 ,  H04N2201/3205 ,  H04N2201/3207

摘要： A multifunction printer enables the printing of time-based media and is operated via a user interface. The user interface includes a touch screen for accepting command inputs and providing information to a user. Time-based media data is received by the printer from a media source specified via the user interface. A user specifies one or more multimedia processing functions for the printer to apply to the data. The printer performs the specified functions, and previews the output to the user via a display of the user interface. If the user decides to print the previewed output, the user specifies one or more output devices, such that the printer can print conventional printed output and/or to a specified electronic output.

摘要翻译： 多功能打印机能够打印基于时间的媒体，并通过用户界面进行操作。 用户接口包括用于接受命令输入并向用户提供信息的触摸屏。 基于时间的媒体数据由打印机从通过用户界面指定的媒体源接收。 用户指定打印机应用于数据的一个或多个多媒体处理功能。 打印机执行指定的功能，并通过用户界面的显示将输出预览到用户。 如果用户决定打印预览的输出，则用户指定一个或多个输出设备，使得打印机可以打印传统的打印输出和/或打印到指定的电子输出。

公开(公告)号：US20090019402A1

公开(公告)日：2009-01-15

申请号：US11827530

申请日：2007-07-11

申请人： Qifa Ke ,  Peter E. Hart ,  Jonathan J. Hull ,  Hidenobu Kishi

发明人： Qifa Ke ,  Peter E. Hart ,  Jonathan J. Hull ,  Hidenobu Kishi

IPC分类号： G06F3/048

CPC分类号： G06K9/2081 ,  G06K9/228 ,  G06K2209/01

摘要： The present invention uses invisible junctions which are a set of local features unique to every page of the electronic document to match the captured image to a part of an electronic document. The present invention includes: an image capture device, a feature extraction and recognition system and database. When an electronic document is printed, the feature extraction and recognition system captures an image of the document page. The features in the captured image are then extracted, indexed and stored in the database. Given a query image, usually a small patch of some document page captured by a low resolution image capture device, the features in the query image are extracted and compared against those stored in the database to identify the query image. The present invention also includes methods for recognizing and tracking the viewing region and look at point corresponding to the input query image. This information is combined with a rendering of the original input document to generate a new graphical user interface to the user. This user interface can be displayed on a conventional browser or even on the display of an image capture device.

摘要翻译： 本发明使用作为电子文档的每一页特有的一组局部特征的不可见结，以将捕获的图像与电子文档的一部分相匹配。 本发明包括：图像捕获装置，特征提取和识别系统和数据库。 当打印电子文档时，特征提取和识别系统捕获文档页面的图像。 然后将捕获的图像中的特征提取，索引并存储在数据库中。 给定查询图像，通常是由低分辨率图像捕获设备捕获的一些文档页面的小补丁，提取查询图像中的特征并将其与存储在数据库中的特征进行比较以识别查询图像。 本发明还包括用于识别和跟踪观看区域并查看与输入查询图像相对应的点的方法。 该信息与原始输入文档的呈现相结合，以向用户生成新的图形用户界面。 该用户界面可以显示在常规浏览器上，甚至可以在图像捕获设备的显示器上显示。

公开(公告)号：US07474791B2

公开(公告)日：2009-01-06

申请号：US11334175

申请日：2006-01-17

申请人： Kathrin Berkner ,  Ramesh Neelamani ,  Gregory J. Wolff ,  Martin Boliek ,  Peter E. Hart

发明人： Kathrin Berkner ,  Ramesh Neelamani ,  Gregory J. Wolff ,  Martin Boliek ,  Peter E. Hart

IPC分类号： G06K9/36

CPC分类号： G09G5/373 ,  G06T3/4084 ,  G09G2340/0414 ,  G09G2340/0421 ,  G09G2340/145 ,  H04N1/387 ,  H04N1/393 ,  H04N19/119 ,  H04N19/132 ,  H04N19/134 ,  H04N19/14 ,  H04N19/162 ,  H04N19/17 ,  H04N19/18 ,  H04N19/59 ,  H04N19/647 ,  H04N19/70

摘要： A method and apparatus to receive an image and to create a smaller representation of the image from a wavelet representation of the image is described. The size of the smaller representation of the image is selected to compensate for the content of the image and physical properties of the display device to display the smaller representation of the image.

摘要翻译： 描述了从图像的小波表示中接收图像并创建更小的图像表示的方法和装置。 选择图像的较小表示的大小以补偿图像的内容和显示设备的物理特性以显示图像的较小表示。