公开(公告)号：US09189892B2

公开(公告)日：2015-11-17

申请号：US13175252

申请日：2011-07-01

申请人： Leon Palm ,  Hartwig Adam

发明人： Leon Palm ,  Hartwig Adam

IPC分类号： G06T19/00 ,  G09G5/00 ,  G06F3/01

CPC分类号： G06T19/006 ,  A63F3/00094 ,  A63F3/02 ,  A63F13/5375 ,  A63F13/65 ,  A63F2003/0418 ,  A63F2009/2425 ,  A63F2009/2435 ,  A63F2009/2486 ,  G06F3/011 ,  G06K9/00442 ,  G06K9/00671 ,  G06K9/00771 ,  G06K9/52 ,  G06K9/6201 ,  G06K9/6256 ,  G06K2009/4666 ,  G06T3/00 ,  G06T5/006 ,  G06T7/60 ,  G06T15/20 ,  G06T19/00 ,  G06T2207/20021

摘要： Systems and methods for generating an augmented reality interface for generics activities are disclosed. The systems and methods may be directed to creating an augmented reality display for an activity performed on a surface. Given an image of the activity, an activity solver library and associated configuration information for the activity may be selected. The surface of the activity from the image may be rectified, forming a rectified image, from which activity state information may be extracted using the configuration information. The activity state information may be provided to the activity solver library to generate solution information, and elements indicating the solution information may be rendered in a perspective of the original image. By providing the configuration information associated with an activity solver library, an augmented reality interface can be generated for an activity by capturing an image of the activity.

摘要翻译： 公开了用于生成泛型活动的增强现实界面的系统和方法。 系统和方法可以针对创建在表面上执行的活动的增强现实显示。 给定活动的图像，可以选择活动解决者库和活动的相关配置信息。 来自图像的活动的表面可以被纠正，形成整流图像，使用配置信息可以从中提取活动状态信息。 可以将活动状态信息提供给活动解决者库以生成解决方案信息，并且可以从原始图像的角度呈现指示解决方案信息的元素。 通过提供与活动解决者库相关联的配置信息，可以通过捕获活动的图像来为活动生成增强现实界面。

公开(公告)号：US08897565B1

公开(公告)日：2014-11-25

申请号：US13538145

申请日：2012-06-29

申请人： Leon Palm ,  Hartwig Adam

发明人： Leon Palm ,  Hartwig Adam

IPC分类号： G06K9/00

CPC分类号： G06K9/3275 ,  G06K2209/01

摘要： The present technology proposes techniques for extracting forms and other types of documents from images taken with a mobile client device. By calculating and making adjustments along a document's detected borders, an input image can be transformed such that the document within the image may be properly aligned and background clutter completely removed. The resulting text fields of the extracted document are thus upright, aligned and locatable at predictable points.

摘要翻译： 本技术提出了从用移动客户端设备拍摄的图像中提取表单和其他类型的文档的技术。 通过沿着文档检测到的边界计算和进行调整，可以变换输入图像，使得图像内的文档可以被正确对齐，并且完全去除背景杂波。 所提取的文档的结果文本字段因此在可预测的点处是直立的，对齐的和可定位的。

公开(公告)号：US20150170417A1

公开(公告)日：2015-06-18

申请号：US13175252

申请日：2011-07-01

申请人： Leon Palm ,  Hartwig Adam

发明人： Leon Palm ,  Hartwig Adam

IPC分类号： G06T19/00

CPC分类号： G06T19/006 ,  A63F3/00094 ,  A63F3/02 ,  A63F13/5375 ,  A63F13/65 ,  A63F2003/0418 ,  A63F2009/2425 ,  A63F2009/2435 ,  A63F2009/2486 ,  G06F3/011 ,  G06K9/00442 ,  G06K9/00671 ,  G06K9/00771 ,  G06K9/52 ,  G06K9/6201 ,  G06K9/6256 ,  G06K2009/4666 ,  G06T3/00 ,  G06T5/006 ,  G06T7/60 ,  G06T15/20 ,  G06T19/00 ,  G06T2207/20021

摘要： Systems and methods for generating an augmented reality interface for generics activities are disclosed. The systems and methods may be directed to creating an augmented reality display for an activity performed on a surface. Given an image of the activity, an activity solver library and associated configuration information for the activity may be selected. The surface of the activity from the image may be rectified, forming a rectified image, from which activity state information may be extracted using the configuration information. The activity state information may be provided to the activity solver library to generate solution information, and elements indicating the solution information may be rendered in a perspective of the original image. By providing the configuration information associated with an activity solver library, an augmented reality interface can be generated for an activity by capturing an image of the activity.

摘要翻译： 公开了用于生成泛型活动的增强现实界面的系统和方法。 系统和方法可以针对创建在表面上执行的活动的增强现实显示。 给定活动的图像，可以选择活动解决者库和活动的相关配置信息。 来自图像的活动的表面可以被纠正，形成整流图像，使用配置信息可以从中提取活动状态信息。 可以将活动状态信息提供给活动解决者库以生成解决方案信息，并且可以从原始图像的角度呈现指示解决方案信息的元素。 通过提供与活动解决者库相关联的配置信息，可以通过捕获活动的图像来为活动生成增强现实界面。

公开(公告)号：US09406090B1

公开(公告)日：2016-08-02

申请号：US13346564

申请日：2012-01-09

申请人： Hartwig Adam ,  Hartmut Neven ,  Laura Garcia-Barrio ,  David Petrou

发明人： Hartwig Adam ,  Hartmut Neven ,  Laura Garcia-Barrio ,  David Petrou

IPC分类号： G06F15/16 ,  G06Q50/00 ,  G06F17/27 ,  G06F17/30 ,  G06F17/21

CPC分类号： G06Q50/01 ,  G06F17/21 ,  G06F17/27 ,  G06F17/30 ,  G06F17/30634 ,  G06F17/30699

摘要： A method and apparatus for sharing captured media data via a social networking service is described herein. The method includes receiving a list of one or more media data files captured via a mobile (i.e., portable) computing device, the list to include, for each of the media data files, data identifying one or more real-world experiences of a user of the social networking service associated with the respective media data file. The method also includes transmitting information for providing an interface to the mobile computing device to enable the user to share one or more of the media data files in the social network with one or more other users by identifying each media data file with the data identifying a corresponding real-world experience. Furthermore, the method allows for the sharing of data related to the context of each corresponding real-world experience.

摘要翻译： 这里描述了用于经由社交网络服务共享捕获的媒体数据的方法和装置。 该方法包括接收通过移动（即便携式）计算设备捕获的一个或多个媒体数据文件的列表，该列表包括针对每个媒体数据文件标识用户的一个或多个真实世界体验的数据 与相应的媒体数据文件相关联的社交网络服务。 该方法还包括发送用于向移动计算设备提供接口的信息，以使得用户能够通过识别每个媒体数据文件来与一个或多个其他用户共享社交网络中的一个或多个媒体数据文件，该数据标识一个 相应的现实世界经验。 此外，该方法允许与每个相应的现实世界体验的上下文相关的数据的共享。

公开(公告)号：US09275079B2

公开(公告)日：2016-03-01

申请号：US13151626

申请日：2011-06-02

申请人： Shailesh Nalawadi ,  Hartmut Neven ,  Hartwig Adam

发明人： Shailesh Nalawadi ,  Hartmut Neven ,  Hartwig Adam

IPC分类号： G06F17/30 ,  G06K9/00

CPC分类号： G06F17/3028 ,  G06F17/30247 ,  G06K9/00671

摘要： A method and apparatus for enabling semantic association of images with augmentation data is described. The method may include receiving digital image data captured by a mobile device. The method may also include performing image recognition analysis on an object within the digital image data to identify the object. The method may also include querying a semantic associations database based on a determined identify of the object to determine a secondary meaning associated with the object, and transmitting augmentation data to the mobile device that is semantically relevant to the object based on the secondary meaning.

摘要翻译： 描述了用于使得具有增强数据的图像的语义关联的方法和装置。 该方法可以包括接收由移动设备捕获的数字图像数据。 该方法还可以包括对数字图像数据内的对象执行图像识别分析以识别对象。 该方法还可以包括基于所确定的对象的标识来查询语义关联数据库，以确定与对象相关联的次要含义，以及基于次要含义将增加数据发送到与对象语义相关的移动设备。

公开(公告)号：US08761512B1

公开(公告)日：2014-06-24

申请号：US12960413

申请日：2010-12-03

申请人： Ulrich Buddemeier ,  Gabriel Taubman ,  Hartwig Adam ,  Charles Rosenberg ,  Hartmut Neven ,  David Petrou ,  Fernando Brucher

发明人： Ulrich Buddemeier ,  Gabriel Taubman ,  Hartwig Adam ,  Charles Rosenberg ,  Hartmut Neven ,  David Petrou ,  Fernando Brucher

IPC分类号： G06K9/00

CPC分类号： G06F17/30277 ,  G06F17/30256 ,  G06F17/30268 ,  G06F17/3053 ,  G06F17/30554 ,  G06K9/6215 ,  G06K9/6282 ,  G06K9/723 ,  G06K2209/01

摘要： Methods, systems, and apparatus, including computer programs encoded on computer storage media, for processing queries made up of images. In one aspect, a method includes indexing images by image descriptors. The method further includes associating descriptive n-grams with the images. In another aspect, a method includes receiving a query, identifying text describing the query, and performing a search according to the text identified for the query.

摘要翻译： 方法，系统和装置，包括在计算机存储介质上编码的计算机程序，用于处理由图像组成的查询。 一方面，一种方法包括通过图像描述符索引图像。 该方法还包括将描述性n-gram与图像相关联。 在另一方面，一种方法包括接收查询，识别描述查询的文本，以及根据为查询标识的文本执行搜索。

公开(公告)号：US08670597B2

公开(公告)日：2014-03-11

申请号：US12851473

申请日：2010-08-05

申请人： David Petrou ,  Andrew Rabinovich ,  Hartwig Adam

发明人： David Petrou ,  Andrew Rabinovich ,  Hartwig Adam

IPC分类号： G06K9/00

CPC分类号： G06F17/30268 ,  G06F17/30256 ,  G06F17/30277 ,  G06F17/3053 ,  G06F17/30867 ,  G06K9/00288 ,  G06K9/00677

摘要： A facial recognition search system identifies one or more likely names (or other personal identifiers) corresponding to the facial image(s) in a query as follows. After receiving the visual query with one or more facial images, the system identifies images that potentially match the respective facial image in accordance with visual similarity criteria. Then one or more persons associated with the potential images are identified. For each identified person, person-specific data comprising metrics of social connectivity to the requester are retrieved from a plurality of applications such as communications applications, social networking applications, calendar applications, and collaborative applications. An ordered list of persons is then generated by ranking the identified persons in accordance with at least metrics of visual similarity between the respective facial image and the potential image matches and with the social connection metrics. Finally, at least one person identifier from the list is sent to the requester.

摘要翻译： 面部识别搜索系统如下所述识别与查询中的面部图像相对应的一个或多个可能的名称（或其他个人标识符）。 在接收到具有一个或多个面部图像的视觉查询之后，系统根据视觉相似性标准识别潜在地匹配相应面部图像的图像。 然后识别与潜在图像相关联的一个或多个人。 对于每个已识别的人，从诸如通信应用，社交网络应用，日历应用和协作应用的多个应用中检索包括对请求者的社交连接性度量的个人特定数据。 然后通过根据相应的面部图像和潜在图像匹配之间的视觉相似性的度量以及与社会连接度量进行评估来对所识别的人进行排序来生成人的有序列表。 最后，从列表中至少有一个人标识符被发送到请求者。

公开(公告)号：US08532400B1

公开(公告)日：2013-09-10

申请号：US13556350

申请日：2012-07-24

申请人： Boris Babenko ,  Hartwig Adam ,  John Flynn ,  Hartmut Neven

发明人： Boris Babenko ,  Hartwig Adam ,  John Flynn ,  Hartmut Neven

IPC分类号： G06K9/62

CPC分类号： G06K9/00671 ,  G06K2209/27

摘要： Aspects of the invention pertain to identifying whether or not an image from a user's device is of a place. Before undertaking time and resource consuming analysis of an image using specialized image analysis modules, pre-filtering classification is conducted based on image data and metadata associated with the image. The metadata may include geolocation information. One classification procedure analyzes the metadata to perform a high level determination as to whether the image is of a place. If the results indicate that it is of a place, then a further classification procedure may be performed, where the image information is analyzed, with or without the metadata. This process may be done concurrently with a place match filtering procedure. The results of the further classification will either find a match with a given place or not. The output is a place match either with or without geolocation information.

摘要翻译： 本发明的方面涉及识别来自用户设备的图像是否是位置。 在使用专门的图像分析模块对图像进行时间和资源消耗分析之前，基于与图像相关联的图像数据和元数据进行预过滤分类。 元数据可以包括地理定位信息。 一个分类程序分析元数据以对图像是否是一个地方进行高级确定。 如果结果表明它是一个地方，则可以执行进一步的分类过程，其中分析图像信息，具有或不具有元数据。 该过程可以与场所匹配过滤程序同时进行。 进一步分类的结果将会找到与给定地点的匹配。 输出是与地理位置信息或不具有地理位置信息的地点匹配。

公开(公告)号：US08396287B2

公开(公告)日：2013-03-12

申请号：US12466880

申请日：2009-05-15

申请人： Hartwig Adam ,  Li Zhang

发明人： Hartwig Adam ,  Li Zhang

IPC分类号： G06K9/62 ,  G06K9/00 ,  G06K9/46 ,  G06K9/60 ,  G06F7/00

CPC分类号： G06K9/6217 ,  G06F17/30244 ,  G06F17/30247 ,  G06F17/30265 ,  G06K9/00624 ,  G06K9/00664 ,  G06K9/46 ,  G06K9/726

摘要： Methods and systems for automatic detection of landmarks in digital images and annotation of those images are disclosed. A method for detecting and annotating landmarks in digital images includes the steps of automatically assigning a tag descriptive of a landmark to one or more images in a plurality of text-associated digital images to generate a set of landmark-tagged images, learning an appearance model for the landmark from the set of landmark-tagged images, and detecting the landmark in a new digital image using the appearance model. The method can also include a step of annotating the new image with the tag descriptive of the landmark.

公开(公告)号：US08332424B2

公开(公告)日：2012-12-11

申请号：US13107295

申请日：2011-05-13

申请人： John Flynn ,  Dragomir Anguelov ,  Hartmut Neven ,  Mark Cummins ,  James Philbin ,  Rafael Spring ,  Hartwig Adam ,  Anand Pillai

发明人： John Flynn ,  Dragomir Anguelov ,  Hartmut Neven ,  Mark Cummins ,  James Philbin ,  Rafael Spring ,  Hartwig Adam ,  Anand Pillai

IPC分类号： G06F17/30

CPC分类号： G06F17/30268 ,  G06F17/30247 ,  G06F17/3028

摘要： A method and apparatus for enabling virtual tags is described. The method may include receiving a first digital image data and virtual tag data to be associated with a real-world object in the first digital image data, wherein the first digital image data is captured by a first mobile device, and the virtual tag data includes metadata received from a user of the first mobile device. The method may also include generating a first digital signature from the first digital image data that describes the real-world object, and in response to the generation, inserting in substantially real-time the first digital signature into a searchable index of digital images. The method may also include storing, in a tag database, the virtual tag data and an association between the virtual tag data and the first digital signature inserted into the index of digital images.

摘要翻译： 描述了一种用于启用虚拟标签的方法和装置。 该方法可以包括在第一数字图像数据中接收与真实世界对象相关联的第一数字图像数据和虚拟标签数据，其中第一数字图像数据由第一移动设备捕获，并且虚拟标签数据包括 从第一移动设备的用户接收的元数据。 该方法还可以包括从描述真实世界对象的第一数字图像数据生成第一数字签名，并且响应于生成，基本上实时地将第一数字签名插入到可搜索的数字图像索引中。 该方法还可以包括在标签数据库中存储虚拟标签数据以及虚拟标签数据与插入数字图像索引中的第一数字签名之间的关联。