公开(公告)号：CN111767732B

公开(公告)日：2024-01-26

申请号：CN202010519571.1

申请日：2020-06-09

Applicant: 上海交通大学

Inventor： 华远 ,  黄征 ,  周异 ,  陈凯

IPC: G06F40/295 ,  G06F40/279 ,  G06V30/413 ,  G06V10/82 ,  G06N3/045 ,  G06N3/042

Abstract: 本发明提供了一种基于图注意力模型的文档内容理解方法及系统，包括：文档建图模块：对文档中出现的文本单词按照关联性建立边，从而生成对应文档内容的图网络，建立文档的二维空间信息；文档文字特征提取模块：使用自然语言处理领域的模型提取得到文档中的文字的向量表示，记为文字特征信息；文档图片特征提取模块：使用计算机视觉领域的模型提取得到文档中文字的图像信息表示，记为图片特征信息；图注意力模型：对文档的文字特征和图片特征进行特征融合，并且根据建立的文档的二维空间信息对相邻的节点之间的信息进行交换和传递。本发明利用图神经网路对得到的图结构信息进行学习训练，从而可以显性并有效的利用文档的二维空(56)对比文件Tao Gui等.A lexicon-based graphneural network for Chinese NER.《Proceedings or the 2019 Conference onEmpirical Methods in Natural LanguageProcessing and the 9th InternationalJoint Conference on Natural LanguageProcessing》.2019,第3节.Petar Veličković等.Graph AttentionNetworks《.The 6th InternationalConference on Learning Representations》.2018,第1节.

公开(公告)号：CN109753921A

公开(公告)日：2019-05-14

申请号：CN201811640575.4

申请日：2018-12-29

Applicant: 上海交通大学

Inventor： 彭炫 ,  华远 ,  何诗音 ,  黄征

IPC: G06K9/00 ,  G06K9/62

Abstract: 本发明公开了一种人脸特征向量隐私保护识别方法，涉及人脸识别领域，包括如下步骤：S10，参考对象人脸图像隐私保护；S20，被识别对象人脸图像隐私保护；S30，对所述被识别对象进行识别。本发明降低了服务提供商数据存储上的压力和因为数据泄露而带来的道德与法律风险，避免了网络传输中不安全因素所造成的脸部隐私泄露风险，有效地保护了人脸识别的隐私。

公开(公告)号：CN111767732A

公开(公告)日：2020-10-13

申请号：CN202010519571.1

申请日：2020-06-09

Applicant: 上海交通大学

Inventor： 华远 ,  黄征 ,  周异 ,  陈凯

IPC: G06F40/295 ,  G06F40/279 ,  G06K9/00

Abstract: 本发明提供了一种基于图注意力模型的文档内容理解方法及系统，包括：文档建图模块：对文档中出现的文本单词按照关联性建立边，从而生成对应文档内容的图网络，建立文档的二维空间信息；文档文字特征提取模块：使用自然语言处理领域的模型提取得到文档中的文字的向量表示，记为文字特征信息；文档图片特征提取模块：使用计算机视觉领域的模型提取得到文档中文字的图像信息表示，记为图片特征信息；图注意力模型：对文档的文字特征和图片特征进行特征融合，并且根据建立的文档的二维空间信息对相邻的节点之间的信息进行交换和传递。本发明利用图神经网路对得到的图结构信息进行学习训练，从而可以显性并有效的利用文档的二维空间信息。