公开(公告)号：US07725451B2

公开(公告)日：2010-05-25

申请号：US11337825

申请日：2006-01-23

申请人： Feng Jing ,  Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Chang-Hu Wang

发明人： Feng Jing ,  Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Chang-Hu Wang

IPC分类号： G06F7/00 ,  G06F17/30

CPC分类号： G06F17/30265

摘要： A method and system for generating clusters of images for a search result of an image query is provided. When an original image query is received, the search system identifies text associated with the original image query by submitting the original image query to a search engine. The search system identifies phrases from the text of the web page containing the search result. The search system uses each of the identified phrases as an image query and submits the image queries to an image search engine. The search system considers the image search result for each image query to represent a cluster of related images. The search system then presents the clusters of images as the images of the image search result of the original image query.

摘要翻译： 提供了一种用于生成用于图像查询的搜索结果的图像群集的方法和系统。 当接收到原始图像查询时，搜索系统通过将原始图像查询提交给搜索引擎来识别与原始图像查询相关联的文本。 搜索系统从包含搜索结果的网页的文本中识别短语。 搜索系统使用每个识别的短语作为图像查询，并将图像查询提交给图像搜索引擎。 搜索系统考虑每个图像查询的图像搜索结果来表示相关图像的集群。 然后，搜索系统将图像集合呈现为原始图像查询的图像搜索结果的图像。

公开(公告)号：US20070174269A1

公开(公告)日：2007-07-26

申请号：US11337825

申请日：2006-01-23

申请人： Feng Jing ,  Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Chang-Hu Wang

发明人： Feng Jing ,  Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Chang-Hu Wang

IPC分类号： G06F17/30

CPC分类号： G06F17/30265

摘要： A method and system for generating clusters of images for a search result of an image query is provided. When an original image query is received, the search system identifies text associated with the original image query by submitting the original image query to a search engine. The search system identifies phrases from the text of the web page containing the search result. The search system uses each of the identified phrases as an image query and submits the image queries to an image search engine. The search system considers the image search result for each image query to represent a cluster of related images. The search system then presents the clusters of images as the images of the image search result of the original image query.

摘要翻译： 提供了一种用于生成用于图像查询的搜索结果的图像群集的方法和系统。 当接收到原始图像查询时，搜索系统通过将原始图像查询提交给搜索引擎来识别与原始图像查询相关联的文本。 搜索系统从包含搜索结果的网页的文本中识别短语。 搜索系统使用每个识别的短语作为图像查询，并将图像查询提交给图像搜索引擎。 搜索系统考虑每个图像查询的图像搜索结果来表示相关图像的集群。 然后，搜索系统将图像集合呈现为原始图像查询的图像搜索结果的图像。

公开(公告)号：US07403642B2

公开(公告)日：2008-07-22

申请号：US11111696

申请日：2005-04-21

申请人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

发明人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

IPC分类号： G06K9/00

CPC分类号： G06K9/00288 ,  G06F17/30265 ,  G06F17/30274 ,  G06K9/6221 ,  G06K2009/00328 ,  Y10S707/99945 ,  Y10S707/99948

摘要： Systems, engines, user interfaces, and methods allow a user to select a group of images, such as digital photographs, and assign to the group of images the name of a person who is represented in each of the images. The name is automatically propagated to the face of the person, each time the person's face occurs in an image. In one implementation, names and associations are shared between a browsing mode for viewing multiple images at once and a viewer mode, for viewing one image at a time. The browsing mode can provide a menu of candidate names for annotating a face in a single image of the viewer mode. Likewise, the viewer mode can provide annotated face information to the browser mode for facilitating name propagation. Identification of a person's face in multiple images can be accomplished not only by finding similarities in facial features but also by finding similarities in contextual features near the face in different images.

摘要翻译： 系统，引擎，用户界面和方法允许用户选择一组图像，例如数字照片，并且在图像组中分配在每个图像中表示的人的姓名。 每当人的脸发生在图像中时，名称将自动传播到人的脸部。 在一个实现中，名称和关联在用于一次查看多个图像的浏览模式和观看者模式之间共享，以便一次查看一个图像。 浏览模式可以提供用于在观看者模式的单个图像中注释脸部的候选名称的菜单。 类似地，观看者模式可以向浏览器模式提供注释的面部信息，以便于名称传播。 可以通过在面部特征中发现相似性，而且通过在不同图像中的脸部附近的上下文特征中找到相似性来实现多个图像中的人脸识别。

公开(公告)号：US20080152201A1

公开(公告)日：2008-06-26

申请号：US12047247

申请日：2008-03-12

申请人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

发明人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

IPC分类号： G06K9/46 ,  G06K9/00

CPC分类号： G06K9/00288 ,  G06F16/54 ,  G06F16/58 ,  G06K9/6221 ,  G06K2009/00328 ,  Y10S707/99945 ,  Y10S707/99948

摘要： Systems, engines, user interfaces, and methods allow a user to select a group of images, such as digital photographs, and assign to the group of images the name of a person who is represented in each of the images. The name is automatically propagated to the face of the person, each time the person's face occurs in an image. In one implementation, names and associations are shared between a browsing mode for viewing multiple images at once and a viewer mode, for viewing one image at a time. The browsing mode can provide a menu of candidate names for annotating a face in a single image of the viewer mode. Likewise, the viewer mode can provide annotated face information to the browser mode for facilitating name propagation. Identification of a person's face in multiple images can be accomplished not only by finding similarities in facial features but also by finding similarities in contextual features near the face in different images.

摘要翻译： 系统，引擎，用户界面和方法允许用户选择一组图像，例如数字照片，并且在图像组中分配在每个图像中表示的人的姓名。 每当人的脸发生在图像中时，名称将自动传播到人的脸部。 在一个实现中，名称和关联在用于一次查看多个图像的浏览模式和观看者模式之间共享，以便一次查看一个图像。 浏览模式可以提供用于在观看者模式的单个图像中注释脸部的候选名称的菜单。 类似地，观看者模式可以向浏览器模式提供注释的面部信息，以便于名称传播。 可以通过在面部特征中发现相似性，而且通过在不同图像中的脸部附近的上下文特征中找到相似性来实现多个图像中的人脸识别。

公开(公告)号：US20060239515A1

公开(公告)日：2006-10-26

申请号：US11111696

申请日：2005-04-21

申请人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

发明人： Lei Zhang ,  Mingjing Li ,  Wei-Ying Ma ,  Yan-Feng Sun ,  Yuxiao Hu

IPC分类号： G06F17/00 ,  G06K9/00 ,  G06K9/54

CPC分类号： G06K9/00288 ,  G06F17/30265 ,  G06F17/30274 ,  G06K9/6221 ,  G06K2009/00328 ,  Y10S707/99945 ,  Y10S707/99948

摘要： Systems, engines, user interfaces, and methods allow a user to select a group of images, such as digital photographs, and assign to the group of images the name of a person who is represented in each of the images. The name is automatically propagated to the face of the person, each time the person's face occurs in an image. In one implementation, names and associations are shared between a browsing mode for viewing multiple images at once and a viewer mode, for viewing one image at a time. The browsing mode can provide a menu of candidate names for annotating a face in a single image of the viewer mode. Likewise, the viewer mode can provide annotated face information to the browser mode for facilitating name propagation. Identification of a person's face in multiple images can be accomplished not only by finding similarities in facial features but also by finding similarities in contextual features near the face in different images.

摘要翻译： 系统，引擎，用户界面和方法允许用户选择一组图像，例如数字照片，并且在图像组中分配在每个图像中表示的人的姓名。 每当人的脸发生在图像中时，名称将自动传播到人的脸部。 在一个实现中，名称和关联在用于一次查看多个图像的浏览模式和观看者模式之间共享，以便一次查看一个图像。 浏览模式可以提供用于在观看者模式的单个图像中注释脸部的候选名称的菜单。 类似地，观看者模式可以向浏览器模式提供注释的面部信息，以便于名称传播。 可以通过在面部特征中发现相似性，而且通过在不同图像中的脸部附近的上下文特征中找到相似性来实现多个图像中的人脸识别。

公开(公告)号：US08457416B2

公开(公告)日：2013-06-04

申请号：US11956333

申请日：2007-12-13

申请人： Jing Liu ,  Bin Wang ,  Zhiwei Li ,  Mingjing Li ,  Wei-Ying Ma

发明人： Jing Liu ,  Bin Wang ,  Zhiwei Li ,  Mingjing Li ,  Wei-Ying Ma

IPC分类号： G06K9/72

CPC分类号： G06F17/30247 ,  G06F17/30731

摘要： Word correlations are estimated using a content-based method, which uses visual features of image representations of the words. The image representations of the subject words may be generated by retrieving images from data sources (such as the Internet) using image search with the subject words as query words. One aspect of the techniques is based on calculating the visual distance or visual similarity between the sets of retrieved images corresponding to each query word. The other is based on calculating the visual consistence among the set of the retrieved images corresponding to a conjunctive query word. The combination of the content-based method and a text-based method may produce even better result.

摘要翻译： 使用基于内容的方法来估计词相关性，其使用词的图像表示的视觉特征。 可以通过使用将主题词作为查询词的图像搜索从数据源（例如因特网）检索图像来生成主题词的图像表示。 该技术的一个方面是基于计算对应于每个查询词的检索图像组之间的视觉距离或视觉相似度。 另一个是基于计算与连接查询词对应的检索到的图像的集合之间的视觉一致性。 基于内容的方法和基于文本的方法的组合可以产生更好的结果。

公开(公告)号：US08321424B2

公开(公告)日：2012-11-27

申请号：US11848157

申请日：2007-08-30

申请人： Mingjing Li ,  Wei-Ying Ma ,  Zhiwei Li ,  Xiaoguang Rui

发明人： Mingjing Li ,  Wei-Ying Ma ,  Zhiwei Li ,  Xiaoguang Rui

IPC分类号： G06F7/00 ,  G06F17/30

CPC分类号： G06F17/30265 ,  G06F17/30864

摘要： Systems and methods for bipartite graph reinforcement modeling to annotate web images are described. In one aspect the systems and methods implement bipartite graph reinforcement modeling operations to identify a set of annotations that are relevant to a Web image. The systems and methods annotate the Web image with the identified annotations. The systems and methods then index the annotated Web image. Responsive to receiving an image search query from a user, wherein the image search query comprises information relevant to at least a subset of the identified annotations, the image search engine service presents the annotated Web image to the user.

摘要翻译： 描述了用于注释网络图像的二分图加强建模的系统和方法。 在一个方面，系统和方法实现二分图加强建模操作，以识别与Web图像相关的一组注释。 系统和方法用已识别的注释注释Web图像。 系统和方法然后索引注释的Web图像。 响应于从用户接收图像搜索查询，其中所述图像搜索查询包括与所识别的注释的至少一个子集相关的信息，所述图像搜索引擎服务将所述注释的Web图像呈现给所述用户。

公开(公告)号：US20090074306A1

公开(公告)日：2009-03-19

申请号：US11956333

申请日：2007-12-13

申请人： Jing Liu ,  Bin Wang ,  Zhiwei Li ,  Mingjing Li ,  Wei-Ying Ma

发明人： Jing Liu ,  Bin Wang ,  Zhiwei Li ,  Mingjing Li ,  Wei-Ying Ma

IPC分类号： G06K9/72

CPC分类号： G06F17/30247 ,  G06F17/30731

摘要： Word correlations are estimated using a content-based method, which uses visual features of image representations of the words. The image representations of the subject words may be generated by retrieving images from data sources (such as the Internet) using image search with the subject words as query words. One aspect of the techniques is based on calculating the visual distance or visual similarity between the sets of retrieved images corresponding to each query word. The other is based on calculating the visual consistence among the set of the retrieved images corresponding to a conjunctive query word. The combination of the content-based method and a text-based method may produce even better result.

摘要翻译： 使用基于内容的方法来估计词相关性，其使用词的图像表示的视觉特征。 可以通过使用将主题词作为查询词的图像搜索从数据源（例如因特网）检索图像来生成主题词的图像表示。 该技术的一个方面是基于计算对应于每个查询词的检索图像组之间的视觉距离或视觉相似度。 另一个是基于计算与连接查询词对应的检索到的图像的集合之间的视觉一致性。 基于内容的方法和基于文本的方法的组合可以产生更好的结果。

公开(公告)号：US20070196013A1

公开(公告)日：2007-08-23

申请号：US11358705

申请日：2006-02-21

申请人： Mingjing Li ,  Wei-Ying Ma ,  Yuanhao Chen ,  Zhiwei Li

发明人： Mingjing Li ,  Wei-Ying Ma ,  Yuanhao Chen ,  Zhiwei Li

IPC分类号： G06K9/62 ,  G06K9/00

CPC分类号： G06K9/00456

摘要： A method and system for classifying an image as a photograph or a graphic based on a ranked prevalent color histogram feature or a ranked region size feature is provided. The prevalent color histogram feature contains counts of the colors that are most prevalent in the image sorted in descending order. The region size feature contains counts of the largest regions of the image sorted in descending order. The classification system then classifies the image based on the ranked prevalent color histogram feature and/or the ranked region size feature using a previously trained classifier.

摘要翻译： 提供了一种基于排序流行的颜色直方图特征或排名区域大小特征将图像分类为照片或图形的方法和系统。 流行的颜色直方图特征包含按照降序排列的图像中最流行的颜色的计数。 区域大小特征包含以降序排序的图像的最大区域的计数。 然后，分类系统使用先前训练的分类器，基于排名普遍的颜色直方图特征和/或排名区域大小特征对图像进行分类。

公开(公告)号：US08571850B2

公开(公告)日：2013-10-29

申请号：US11956331

申请日：2007-12-13

申请人： Mingjing Li ,  Jing Lui ,  Bin Wang ,  Zhiwei Li ,  Wei-Ying Ma

发明人： Mingjing Li ,  Jing Lui ,  Bin Wang ,  Zhiwei Li ,  Wei-Ying Ma

IPC分类号： G06F17/27

CPC分类号： G06F17/241 ,  G06F17/2735

摘要： A dual cross-media relevance model (DCMRM) is used for automatic image annotation. In contrast to the traditional relevance models which calculate the joint probability of words and images over a training image database, the DCMRM model estimates the joint probability by calculating the expectation over words in a predefined lexicon. The DCMRM model may be advantageous because a predefined lexicon potentially has better behavior than a training image database. The DCMRM model also takes advantage of content-based techniques and image search techniques to define the word-to-image and word-to-word relations involved in image annotation. Both relations can be estimated by using image search techniques on the web data as well as available training data.

摘要翻译： 双重跨媒体相关性模型（DCMRM）用于自动图像注释。 与在训练图像数据库中计算单词和图像的联合概率的传统相关性模型相反，DCMRM模型通过计算预定义词典中的单词的期望来估计联合概率。 DCMRM模型可能是有利的，因为预定义词典潜在地具有比训练图像数据库更好的行为。 DCMRM模型还利用基于内容的技术和图像搜索技术来定义图像注释中涉及的单词到图像和单词对字的关系。 可以通过使用图像搜索技术对网络数据以及可用的训练数据来估计这两个关系。