Invention Grant
- Patent Title: 作为问答的多任务学习
-
Application No.: CN201980012699.4Application Date: 2019-01-30
-
Publication No.: CN111699498BPublication Date: 2021-08-13
- Inventor: B·麦卡恩 , N·S·凯斯卡 , C·熊 , R·佐赫尔
- Applicant: 易享信息技术有限公司
- Applicant Address: 美国加利福尼亚州
- Assignee: 易享信息技术有限公司
- Current Assignee: 硕动力公司
- Current Assignee Address: 美国加利福尼亚州
- Agency: 北京市联德律师事务所
- Agent 黄大正; 张来光
- Priority: 62/628,850 20180209 US 15/974,118 20180508 US
- International Application: PCT/US2019/015909 2019.01.30
- International Announcement: WO2019/156875 EN 2019.08.15
- Date entered country: 2020-08-10
- Main IPC: G06N3/04
- IPC: G06N3/04 ; G06N5/04
Abstract:
用于作为问答的多任务学习的途径包括:输入层,用于编码语境和问题;基于自我注意的转换器,其包括编码器和解码器;第一双向长期短期记忆(biLSTM),用于进一步编码编码器的输出;长期短期记忆(LSTM),用于由解码器的输出和隐藏状态生成语境调整的隐藏状态;注意网络,用于基于第一biLSTM的输出和LSTM的输出生成第一注意权重;词汇层,用于在词汇上的分布;语境层,用于生成在语境上的分布;和切换器,用于生成在词汇上与在语境上的分布之间的加权,基于加权生成复合分布,和使用复合分布选择回答的词。
Public/Granted literature
- CN111699498A 作为问答的多任务学习 Public/Granted day:2020-09-22
Information query