发明公开
- 专利标题: 一种环境辨别方法、系统、设备及存储介质
-
申请号: CN202110437611.2申请日: 2021-04-22
-
公开(公告)号: CN113128415A公开(公告)日: 2021-07-16
- 发明人: 沈奥 , 韩知渊 , 卫星 , 赵冲 , 陆阳 , 葛久松 , 帅竞贤 , 康旭 , 侯宝华 , 李航
- 申请人: 合肥工业大学
- 申请人地址: 安徽省合肥市包河区屯溪路193号
- 专利权人: 合肥工业大学
- 当前专利权人: 合肥工业大学
- 当前专利权人地址: 安徽省合肥市包河区屯溪路193号
- 代理机构: 上海光华专利事务所
- 代理商 林凡燕
- 主分类号: G06K9/00
- IPC分类号: G06K9/00 ; G06K9/46 ; G06K9/62 ; G06F16/35 ; G06N3/04 ; G06N3/08
摘要:
本发明提供了一种环境辨别方法、系统、设备及存储介质,涉及视频问答技术领域,环境辨别方法包括:在采集到环境问题时,实时采集一预设时长的环境视频;根据环境视频中每一帧的环境图像,得到环境图像特征,并提取环境问题的语义特征,得到问题文本特征;将环境图像特征和问题文本特征进行加权融合,得到融合特征;将融合特征输入环境辨别模型,环境辨别模型根据融合特征,采用对应的激活函数和损失函数,得到预测答案。本发明能够在盲人提出问题时,及时的进行环境的辨别和反馈,使得具有视觉障碍的人群能感知到环境信息;且在交互技术中应用了视频问答技术,使得环境辨别的准确度大大提高,输出的辨别结果与实际情况更符合。
公开/授权文献
- CN113128415B 一种环境辨别方法、系统、设备及存储介质 公开/授权日:2023-09-29