公开(公告)号：CN114764456A

公开(公告)日：2022-07-19

申请号：CN202011599960.6

申请日：2020-12-30

申请人： 华为云计算技术有限公司

发明人： 魏志成 ,  丁单翔 ,  赵洲 ,  怀宝兴 ,  袁晶

IPC分类号： G06F16/783 ,  G06F40/194 ,  G06K9/62 ,  G06N3/04 ,  G06F16/332

摘要： 本申请提供了一种视频问题生成方法及装置，涉及人工智能AI领域，该方法在执行时，可先获取视频信息以及与视频信息相关的N条历史对话记录信息；其中，N大于或等于1；利用第一神经网络模型从视频信息中提取视觉特征信息，以及利用第二神经网络模型从每条历史对话记录信息中提取对话特征信息；针对每条历史对话记录信息，基于多注意力机制的融合模型对视觉特征信息以及对话特征信息进行特征融合，确定对话特征信息对视觉特征信息的第一表征，以及视觉特征信息对对话特征信息的第二表征；针对每条历史对话记录信息，通过问题生成模型对第一表征以及第二表征进行特征提取，生成与视频信息对应的视频备选问题。通过方式获取的视频问题更加可靠。