-
公开(公告)号:CN118097774A
公开(公告)日:2024-05-28
申请号:CN202410110969.8
申请日:2024-01-25
Applicant: 西安电子科技大学广州研究院 , 琶洲实验室(黄埔)
Abstract: 本发明涉及智能行为监控技术领域,公开了一种智能交互行为监测方法、系统、设备和存储介质,所述方法包括基于监测场景,采用视觉分析和语义提取,构建场景知识库,所述场景知识库包括实体属性数据和实体间关系数据;采用预设更新方式,对所述场景知识库进行动态更新,所述预设更新方式包括自动化捕捉更新和人机交互提示更新;响应于预先设置的监测指令被动态更新结果所触发,发出监测告警。本发明通过综合利用多模态信息,包括视觉和语言,以及采用大模型的辅助,提高了智能交互行为监测方法的场景理解能力、适应性和用户交互体验。
-
公开(公告)号:CN117275089A
公开(公告)日:2023-12-22
申请号:CN202311210043.8
申请日:2023-09-19
Applicant: 西安电子科技大学广州研究院 , 琶洲实验室(黄埔)
Abstract: 本发明公开了一种单目摄像头的人物识别方法、装置、设备及存储介质,通过单目摄像头获取场景图像;对所述场景图像中的人物进行姿态估计,确定所述人物的关键点的像素坐标;根据所述单目摄像头的相机内部参数将所述像素坐标转换为真实坐标系的真实坐标;根据所述人物的关键点的真实坐标确定所述人物的动作向量;根据确定的动作向量识别所述人物的行为动作。本申请能够低成本、高精度的是实现室内人物的定位识别。
-
公开(公告)号:CN117315532A
公开(公告)日:2023-12-29
申请号:CN202311223433.9
申请日:2023-09-20
Applicant: 西安电子科技大学广州研究院 , 琶洲实验室(黄埔)
IPC: G06V20/40 , G06V40/10 , G06V10/82 , G06N3/0464
Abstract: 本发明涉及智能看护技术领域,尤其涉及一种智能看护系统及方法,包括数据分析服务器以及与数据分析服务器建立通信连接的所述多个监控边缘端和多个视觉感知端,视觉感知端通过单目摄像头捕获并上传原始看护视频流;数据分析服务器利用深度学习算法对原始看护视频流中的原始图像帧进行语义提取,得到不同类别的语义信息;监控边缘端对每一类别的语义信息对应的语义匹配模型进行加载与驱动,生成人体和场景融合的3D重构虚拟画面。本发明结合深度学习算法和场景重构实现智能化看护系统,不仅通过交互语义提高了重构的准确性和现实性,从而提高了看护识别的精准度,同时提高了看护系统数据传输的安全性,减少信息通信传输带宽。
-
公开(公告)号:CN118486079A
公开(公告)日:2024-08-13
申请号:CN202410651177.1
申请日:2024-05-24
Applicant: 西安电子科技大学广州研究院
Abstract: 本发明公开了一种人物交互识别方法。包括:获取采集设备采集到的待识别视频,将待识别视频拆分为若干个待识别图像,基于每一待识别图像构建静态场景图;对待识别图像中的每一人体对象和每一物体对象进行目标分割,得到人体掩码和物体掩码;通过姿态估计算法识别每一人体对象的人体骨架点;基于人体骨架点,采用聚类算法将人体掩码进行聚类得到人体部件掩码;计算人体部件掩码与物体掩码的掩码交集率,根据掩码交集率得到人物交互关系;将人物交互关系与静态场景图结合,得到待识别图像的动态交互图;将所有动态交互图按照交互时序进行推理得到人物交互事件。本发明能够在复杂的环境中稳定的输出识别结果,提高人物交互事件识别的准确率和实时性。
-
公开(公告)号:CN118821718A
公开(公告)日:2024-10-22
申请号:CN202410650825.1
申请日:2024-05-24
Applicant: 西安电子科技大学广州研究院
IPC: G06F40/126 , G10L15/26 , G06N5/022 , G06N5/02 , G06F18/25 , G06V10/40 , G06V10/25 , G06V40/10 , G06V40/20 , G06V20/70 , G06F40/30 , G06F16/35 , G06N3/042 , G06N3/0464
Abstract: 本发明公开了一种基于知识图谱的语义通信方法、系统、设备及介质,所述方法包括:获取多模态信源信息,并对多模态信源信息进行初步特征提取,得到对应的语义信息;根据语义信息,更新上一次通信时的第一知识图谱,得到更新后的第二知识图谱;其中知识图谱具有多个层级;将第二知识图谱输入图编码器进行语义特征提取,获得第二知识图谱中更新的子图所对应的语义特征;将语义特征传输至信宿端,以使信宿端对语义特征进行解码,更新信宿端中的知识图谱,并根据更新后的知识图谱进行语义重构,得到目标信息。本发明将多模态信源信息融合成知识图谱,只传输发生变化的子图信息,减少了大量的传输带宽,提高了传输效率,也提高了信息传输的安全性。
-
-
-
-