公开(公告)号：WO2014140837A1

公开(公告)日：2014-09-18

申请号：PCT/IB2014/000935

申请日：2014-03-11

Applicant: ORCAM TECHNOLOGIES LTD.

Inventor： WEXLER, Yonatan ,  SHASHUA, Amnon

IPC: G06K9/00 ,  G09B21/00 ,  G06F3/16

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: An apparatus and method are provided for identifying and audibly presenting textual information within captured image data. In one implementation, a method is provided for audibly presenting text retrieved from a captured image. According to the method, at least one image of text is received from an image sensor, and the text may include a first portion and a second portion. The method includes identifying contextual information associated with the text, and accessing at least one rule associating the contextual information with at least one portion of text to be excluded from an audible presentation associated with the text. The method further includes performing an analysis on the at least one image to identify the first portion and the second portion, and causing the audible presentation of the first portion.

Abstract translation: 提供了一种用于识别和可听地呈现拍摄图像数据内的文本信息的装置和方法。 在一个实现中，提供了一种用于可听地呈现从捕获的图像检索的文本的方法。 根据该方法，从图像传感器接收文本的至少一个图像，并且文本可以包括第一部分和第二部分。 所述方法包括识别与文本相关联的上下文信息，以及访问将上下文信息与要从文本相关联的可听呈现排除的文本的至少一部分相关联的至少一个规则。 该方法还包括对至少一个图像执行分析以识别第一部分和第二部分，并且引起第一部分的可听见的呈现。

公开(公告)号：WO2014140838A3

公开(公告)日：2015-03-05

申请号：PCT/IB2014000943

申请日：2014-02-26

Applicant: ORCAM TECHNOLOGIES LTD

Inventor： WEXLER YONATAN ,  SHASHUA AMNON

IPC: G06K9/00 ,  G09B21/00

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: A system and method are provided for accelerating machine reading of text. In one embodiment, the system comprises at least one processor device. The processor device is configured to receive at least one image of text to be audibly read. The text includes a first portion and a second portion. The processor device is further configured to initiate optical character recognition (OCR) to recognize the first portion. The processor device is further configured to initiate an audible presentation of the first portion prior to initiating OCR of the second portion, and simultaneously perform OCR to recognize the second portion of the text to be audibly read during presentation of at least part of the first portion. The processor device is further configured to automatically cause the second portion of the text to be audibly presented immediately upon completion of the presentation of the first portion.

Abstract translation: 提供了一种用于加速文本阅读的系统和方法。 在一个实施例中，该系统包括至少一个处理器设备。 处理器设备被配置为接收要被可听见地读取的文本的至少一个图像。 文本包括第一部分和第二部分。 处理器设备还被配置为启动光学字符识别（OCR）以识别第一部分。 所述处理器设备还被配置为在启动所述第二部分的OCR之前启动所述第一部分的可听见的呈现，并且同时执行OCR以在呈现所述第一部分的至少一部分期间识别所述文本的第二部分以被可听见地读取 。 处理器设备还被配置为在完成第一部分的呈现时，自动地使文本的第二部分立即呈现出可听见的呈现。

公开(公告)号：WO2014140906A2

公开(公告)日：2014-09-18

申请号：PCT/IB2014001168

申请日：2014-03-11

Applicant: ORCAM TECHNOLOGIES LTD

Inventor： WEXLER YONATAN ,  SHASHUA AMNON

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: A device and method are provided for providing feedback based on the state of an object. In one implementation, an apparatus for processing images is provided. The apparatus may include an image sensor configured to capture real time images from an environment of a user and at least one processor device configured to initially process at least one image to determine whether an object is likely to change its state. If a determination is made that the object is unlikely to change its state, the at least one processor device may additionally process the at least one image and provide a first feedback. If a determination is made that the object is likely to change its state, the at least one processor device may continue to capture images of the object and alert the user with a second feedback after a change in the state of the object occurs.

Abstract translation: 提供了一种用于基于对象的状态提供反馈的设备和方法。 在一个实现中，提供了一种用于处理图像的装置。 该装置可以包括被配置为从用户的环境捕捉实时图像的图像传感器以及被配置为最初处理至少一个图像以确定对象是否可能改变其状态的至少一个处理器设备。 如果做出该对象不可能改变其状态的确定，则该至少一个处理器装置可另外处理该至少一个图像并提供第一反馈。 如果确定对象可能改变其状态，则至少一个处理器设备可以继续捕捉对象的图像并且在对象的状态发生改变之后用第二反馈提醒用户。

公开(公告)号：WO2014140834A1

公开(公告)日：2014-09-18

申请号：PCT/IB2014/000925

申请日：2014-02-26

Applicant: ORCAM TECHNOLOGIES LTD.

Inventor： WEXLER, Yonatan ,  SHASHUA, Amnon

IPC: G06K9/00 ,  G09B21/00

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: A device and method are provided for audible facial recognition. In one implementation, an apparatus for aiding a visually impaired user to identify individuals is provided. The apparatus may include a portable image sensor configured to be worn by the visually impaired user and to capture real-time image data from an environment of the user. The apparatus may also include at least one portable processor device configured to determine an existence of face-identifying information in the real-time image data, and access stored facial information and audible indicators. The at least one portable processor device may also be configured to compare the face-identifying information with the stored facial information, and identify a match. Based on the match, the at least one portable processor may be configured to cause an audible indicator to be announced to the visually impaired user.

Abstract translation: 提供用于可听见的面部识别的装置和方法。 在一个实现中，提供了一种用于帮助视觉障碍用户识别个人的装置。 该装置可以包括便携式图像传感器，该便携式图像传感器被配置为由视觉受损的用户佩戴并且从用户的环境捕获实时图像数据。 该装置还可以包括至少一个便携式处理器装置，其被配置为确定实时图像数据中的面部识别信息的存在，以及访问存储的面部信息和可听见的指示符。 所述至少一个便携式处理器装置还可以被配置为将所述面部识别信息与所存储的面部信息进行比较，并且识别匹配。 基于该匹配，所述至少一个便携式处理器可以被配置为使得可视指示符被通知给视障者。

公开(公告)号：WO2014140931A2

公开(公告)日：2014-09-18

申请号：PCT/IB2014001250

申请日：2014-03-06

Applicant: ORCAM TECHNOLOGIES LTD

Inventor： WEXLER YONATAN ,  SHASHUA AMNON

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: A device and method are provided for performing a triggered action. In one implementation, an apparatus for processing real time images of an environment of a user is provided. The apparatus may include an image sensor configured to capture image data for providing a plurality of sequential images of the environment of the user. The apparatus may also include at least one processor device configured to identify a trigger associated with a desire of the user to cause at least one pre¬ defined action associated with an object. The trigger may include an erratic movement of the object. In response to identification of the trigger, the at least one processor device may also be configured to identify a captured representation of the object. Based on at least the captured representation of the object, the at least one processor device may be configured to execute the at least one pre-defined action.

Abstract translation: 提供了一种用于执行触发动作的装置和方法。 在一个实现中，提供了一种用于处理用户的环境的实时图像的装置。 该装置可以包括被配置为捕获用于提供用户的环境的多个顺序图像的图像数据的图像传感器。 该装置还可以包括至少一个处理器装置，其被配置为识别与用户期望相关联的触发器以引起与对象相关联的至少一个预定义动作。 触发器可能包括对象的不稳定移动。 响应于触发器的识别，至少一个处理器设备还可以被配置为识别被捕获的对象的表示。 至少基于被捕获的对象的表示，至少一个处理器设备可以被配置为执行至少一个预定义的动作。

公开(公告)号：WO2014140843A1

公开(公告)日：2014-09-18

申请号：PCT/IB2014/000972

申请日：2014-02-26

Applicant: ORCAM TECHNOLOGIES LTD.

Inventor： WEXLER, Yonatan ,  SHASHUA, Amnon

IPC: G09B21/00 ,  G06K9/00 ,  G06F3/01

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: Apparatuses and a method are provided for providing feedback to a user, who may be visually-impaired. In one implementation, a method is provided for providing feedback to a visually impaired user. The method comprises receiving from a mobile image sensor real time image data that includes a representation of an object in an environment of the visually impaired user. The mobile image sensor is configured to be connected to glasses worn by the visually impaired user. Further, the method comprises receiving a signal indicating a desire of the visually impaired user to obtain information about the object. The method also includes accessing a database holding information about a plurality of objects, and comparing information derived from the received real time image data with information in the database. The method comprises providing the visually impaired user with nonvisual feedback that the object is not locatable in the database.

Abstract translation: 提供了设备和方法来向用户提供反馈，谁可能被视觉障碍。 在一个实现中，提供了一种用于向视力受损用户提供反馈的方法。 该方法包括从视觉受损用户的环境中接收包括对象的表示的移动图像传感器的实时图像数据。 移动图像传感器被配置为连接到由视障者使用的眼镜。 此外，该方法包括接收指示视觉受损用户希望获取关于对象的信息的信号。 该方法还包括访问保存关于多个对象的信息的数据库，以及将从接收到的实时图像数据导出的信息与数据库中的信息进行比较。 该方法包括向视觉障碍用户提供对象在数据库中不可定位的非视觉反馈。

公开(公告)号：WO2014140816A2

公开(公告)日：2014-09-18

申请号：PCT/IB2014000850

申请日：2014-03-06

Applicant: ORCAM TECHNOLOGIES LTD

Inventor： WEXLER YONATAN ,  SHASHUA AMNON

IPC: G06K9/00

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: An apparatus and method are provided for performing one or more actions based on triggers detecting within captured image data. In one implementation, a method is provided for audibly reading text retrieved from a captured image. According to the method, real-time image data is captured from an environment of a user, and an existence of a trigger is determined within the captured image data. In one aspect, the trigger may be associated with a desire of the user to hear text read aloud, and the trigger identifies an intermediate portion of the text a distance from a level break in the text. The method includes performing a layout analysis on the text to identify the level break associated with the trigger, and reading aloud text beginning from the level break associated with the trigger.

Abstract translation: 提供了一种装置和方法，用于基于捕获的图像数据内的触发检测来执行一个或多个动作。 在一个实施方式中，提供了一种用于可听地读取从捕捉的图像中检索的文本的方法。 根据该方法，从用户的环境捕获实时图像数据，并且在捕获的图像数据内确定是否存在触发。 在一个方面中，触发器可以与用户希望朗读朗读文本的期望相关联，并且触发器识别文本的距离文本中的水平中断的距离的中间部分。 该方法包括对文本执行布局分析以识别与触发相关联的等级中断，并且从与触发相关联的等级中断开始朗读文本。

公开(公告)号：WO2015072823A1

公开(公告)日：2015-05-21

申请号：PCT/MA2014/000030

申请日：2014-11-04

Applicant: UNIVERSITÉ MOHAMMED V DE RABAT

Inventor： AJHOUN, Rachida ,  BENSIALI, Saloua

IPC: G09B21/00 ,  G06F17/27 ,  G06K9/62

CPC classification number: G09B21/005 ,  G06F17/2785 ,  G06F17/30734 ,  G06K9/6281 ,  G06K9/726 ,  G06K2009/00489

Abstract: Notre invention est un procédé qui permet de traduire automatiquement le contenu sémantique de l'image scientifique sous un format textuel standardisé et en temps réel. L'intérêt est de rendre l'image accessible aux malvoyants à travers les technologies d'assistance. Les exemples et réalisations non limitatifs de la présente invention ont généralement trait à la vision cognitive. En particulier à l'implémentation d'une solution d'interprétation de l'image scientifique dans le contexte de l'éducation.

Abstract translation: 我们的发明是一种使科学图像的语义内容实时自动翻译成标准化文本格式成为可能的方法。 有益的是通过辅助技术使视觉障碍者可以看到图像。 本发明的非限制性实施例和实施方案通常涉及认知视觉。 特别是在教育背景下实施解释科学形象的解决方案。

公开(公告)号：WO2015057802A1

公开(公告)日：2015-04-23

申请号：PCT/US2014/060637

申请日：2014-10-15

Applicant: 3M INNOVATIVE PROPERTIES COMPANY

Inventor： MOORE, Richard J. ,  LEIGHTON, Michael C. ,  SOMASUNDARAM, Guruprasad ,  ÅKERLUND, Linus ,  PERSSON, Roland ,  AYBAR LÓPEZ, Héctor M. ,  WOLK, Diane R. ,  AXELSSON, Pontus ,  KJELLBERG, Staffan H.

IPC: G06K9/60 ,  G06K9/62 ,  G06K9/78

CPC classification number: G06K9/4652 ,  G06F3/0482 ,  G06K9/00442 ,  G06K9/00671 ,  G06K2009/00489

Abstract: In one example, a method includes receiving a digital note of a plurality of digital notes generated based on image data comprising a visual representation of a scene that includes a plurality of physical notes such that each of the plurality of digital notes respectively corresponds to a particular physical note of the plurality of physical notes, wherein each of the physical notes includes respective recognizable content. In this example, the method also includes receiving user input indicating a modification to one or more visual characteristics of the digital note. In this example, the method also includes editing, in response to the user input, the one or more visual characteristics of the digital note. In this example, the method also includes outputting, for display, a modified version of the digital note that includes the one or more visual characteristics.

Abstract translation: 在一个示例中，一种方法包括接收基于图像数据生成的多个数字音符的数字音符，所述数字音符包括包括多个物理音符的场景的视觉表示，使得所述多个数字音符中的每一个分别对应于特定的 多个物理笔记的物理笔记，其中每个物理笔记包括相应的可识别的内容。 在该示例中，该方法还包括接收指示对数字音符的一个或多个视觉特征的修改的用户输入。 在该示例中，该方法还包括响应于用户输入编辑数字音符的一个或多个视觉特征。 在该示例中，该方法还包括输出用于显示包括一个或多个视觉特征的数字音符的修改版本。

公开(公告)号：WO2014140903A2

公开(公告)日：2014-09-18

申请号：PCT/IB2014/001156

申请日：2014-03-11

Applicant: ORCAM TECHNOLOGIES LTD.

Inventor： WEXLER, Yonatan ,  SHASHUA, Amnon

CPC classification number: G06K9/3275 ,  A61F9/08 ,  G01B11/24 ,  G02C11/10 ,  G06F3/011 ,  G06F3/16 ,  G06F17/2765 ,  G06K9/00221 ,  G06K9/00288 ,  G06K9/00442 ,  G06K9/00463 ,  G06K9/00469 ,  G06K9/00483 ,  G06K9/00671 ,  G06K9/00852 ,  G06K9/2081 ,  G06K9/22 ,  G06K9/30 ,  G06K9/3233 ,  G06K9/3241 ,  G06K9/325 ,  G06K9/3283 ,  G06K9/74 ,  G06K2009/00489 ,  G06K2009/2045 ,  G08B3/10 ,  G08B6/00 ,  G09B21/00 ,  G09B21/001 ,  G09B21/003 ,  G09B21/006 ,  G10L13/043 ,  H04N5/2251 ,  H04N5/2252 ,  H04N5/23229 ,  H04N5/23232

Abstract: A device and method are provided for recognizing text on a curved surface. In one implementation, the device comprises an image sensor configured to capture from an environment of a user multiple images of text on a curved surface. The device also comprises at least one processor device. The at least one processor device is configured to receive a first image of a first perspective of text on the curved surface, receive a second image of a second perspective of the text on the curved surface, perform optical character recognition on at least parts of each of the first image and the second image, combine results of the optical character recognition on the first image and on the second image, and provide the user with a recognized representation of the text, including a recognized representation of the first portion of text.

Abstract translation: 提供了一种用于识别曲面上的文本的装置和方法。 在一个实现中，该设备包括图像传感器，该图像传感器被配置为从用户的环境捕捉曲面上的文本的多个图像。 该设备还包括至少一个处理器设备。 所述至少一个处理器装置被配置为接收曲面上的文本的第一透视图的第一图像，接收曲面上的文本的第二透视图的第二图像，在每个图像的至少部分上执行光学字符识别 将第一图像和第二图像上的光学字符识别的结果进行组合，并且向用户提供文本的识别表示，包括文本的第一部分的识别表示。 / p>