公开(公告)号：CN114255197B

公开(公告)日：2024-04-05

申请号：CN202111615821.2

申请日：2021-12-27

申请人： 西安交通大学 ,  中国航天科工集团第二研究院

发明人： 刘立成 ,  惠维 ,  刘新慧 ,  白改瑞 ,  刘志林 ,  赵鲲 ,  赵季中 ,  王鹏 ,  董博

IPC分类号： G06T5/50 ,  G06T5/60 ,  G06N3/08

摘要： 本发明公开了一种红外与可见光图像自适应融合对齐方法及系统，通过编码得到表征周围纹理区域的特征描述子D1；将特征点位置信息进行上采样后与特征描述子D1结合，得到包含纹理信息和结构信息的特征描述子D2；将两组特征描述子D2进行匹配，获得特征点之间的对应关系，根据对应关系得到透视变换矩阵；利用透视变换矩阵进行图像变换，将原始的热红外辐射图像和可见光图像映射到同一坐标体系中，通过透视变换矩阵进行两幅图像的变换，将表征同一物理位置的特征点映射在同一位置，然后将对齐后的热红外辐射图像和可见光图像进行融合，获得包含热红外和可见光信息的目标图片。实现热辐射热红外辐射图像和可见光图像的自适应融合。

公开(公告)号：CN114255197A

公开(公告)日：2022-03-29

申请号：CN202111615821.2

申请日：2021-12-27

申请人： 西安交通大学 ,  中国航天科工集团第二研究院

发明人： 刘立成 ,  惠维 ,  刘新慧 ,  白改瑞 ,  刘志林 ,  赵鲲 ,  赵季中 ,  王鹏 ,  董博

IPC分类号： G06T5/50 ,  G06N3/08

摘要： 本发明公开了一种红外与可见光图像自适应融合对齐方法及系统，通过编码得到表征周围纹理区域的特征描述子D1；将特征点位置信息进行上采样后与特征描述子D1结合，得到包含纹理信息和结构信息的特征描述子D2；将两组特征描述子D2进行匹配，获得特征点之间的对应关系，根据对应关系得到透视变换矩阵；利用透视变换矩阵进行图像变换，将原始的热红外辐射图像和可见光图像映射到同一坐标体系中，通过透视变换矩阵进行两幅图像的变换，将表征同一物理位置的特征点映射在同一位置，然后将对齐后的热红外辐射图像和可见光图像进行融合，获得包含热红外和可见光信息的目标图片。实现热辐射热红外辐射图像和可见光图像的自适应融合。

公开(公告)号：CN114677349B

公开(公告)日：2024-07-19

申请号：CN202210301529.1

申请日：2022-03-25

申请人： 西安交通大学

发明人： 孙景通 ,  惠维 ,  白改瑞 ,  赵鲲 ,  余凡

IPC分类号： G06T7/00 ,  G06T7/13 ,  G06T7/136 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/08

摘要： 本发明公开了一种编解码端边缘信息增强和注意引导的图像分割方法及系统，将真实图像集，语义分割真值图和边缘分割真值图构成数据集，将数据集分为训练集、验证集和测试集；构建编解码端边缘信息增强和注意引导的图像分割网络N，图像分割网络N中设置有特征提取器和解码器；利用训练集和验证集对图像分割网络N进行训练，得到训练好的图像分割模型M，将测试集图像数据输入训练好的图像分割模型M中，得到图像分割结果。本发明有效缓解了图像分割方法中边缘识别模糊的问题，从而获得更加精确的图像分割结果和更精细的边缘特征。

公开(公告)号：CN114898741B

公开(公告)日：2024-07-16

申请号：CN202210302892.5

申请日：2022-03-25

申请人： 西安交通大学

发明人： 余凡 ,  惠维 ,  杨钊 ,  赵鲲 ,  孙景通 ,  杨杰

IPC分类号： G10L15/06 ,  G10L15/16 ,  G10L15/02 ,  G10L15/26

摘要： 本发明公开了一种基于层重要度排序和RNN降维的轻量化语音识别方法及系统，提取原始语音序列的MFCC特征并划分训练集、验证集和测试集；对训练集、验证集和测试集进行语音信号增强，将增强后的训练集嵌入Transformer模型中；以随机层丢失的训练方式，对Transformer模型进行训练；基于增强后的验证集，利用梯度计算方式计算训练好的Transformer模型中各层的重要度，并按照层重要度排序；以得到的层重要度为基准，构建浅层的Transformer子模型；以Transformer子模型作为推理模型，将增强后的测试集输入推理模型，得到语音识别的结果。提升了数据的可用性和质量；减小模型宽度，提升模型鲁棒性，能够在保证模型精度的基础上降低模型深度，进一步实现模型轻量化。

公开(公告)号：CN118105063A

公开(公告)日：2024-05-31

申请号：CN202311639747.7

申请日：2023-12-01

申请人： 西安交通大学

发明人： 丁菡 ,  张螣 ,  曹峰 ,  赵衰 ,  王鸽 ,  惠维 ,  赵鲲 ,  赵季中

IPC分类号： A61B5/11 ,  A61B5/0507 ,  A61B90/00

摘要： 本发明公开了一种基于毫米波信号的非侵入式跌倒检测方法及系统，通过毫米波雷达收集到的数据计算距离‑速度和距离‑角度谱图，此外应用杂波去除和最小方差无失真响应算法来抑制噪声并增强与多个个体相关的信号；另一方面，Kinect相机捕获RGB图像并生成人体骨架，用于监督本发明基于毫米波雷达的人体姿势和边界框检测；最后，使用一个融合时空特征的双分支神经网络在距离‑角度谱图上进行用户与跌倒检测。本发明突破了新场景下的跌倒检测限制，在光线不足、遮挡、多人的场景等具有挑战性的条件下表现良好，并且有效辨识与跌倒相似的非跌倒运动，为实现可靠、精准的人体跌倒检测提供了可靠解决方案。

公开(公告)号：CN114898741A

公开(公告)日：2022-08-12

申请号：CN202210302892.5

申请日：2022-03-25

申请人： 西安交通大学

发明人： 余凡 ,  惠维 ,  杨钊 ,  赵鲲 ,  孙景通 ,  杨杰

IPC分类号： G10L15/06 ,  G10L15/16 ,  G10L15/02 ,  G10L15/26

摘要： 本发明公开了一种基于层重要度排序和RNN降维的轻量化语音识别方法及系统，提取原始语音序列的MFCC特征并划分训练集、验证集和测试集；对训练集、验证集和测试集进行语音信号增强，将增强后的训练集嵌入Transformer模型中；以随机层丢失的训练方式，对Transformer模型进行训练；基于增强后的验证集，利用梯度计算方式计算训练好的Transformer模型中各层的重要度，并按照层重要度排序；以得到的层重要度为基准，构建浅层的Transformer子模型；以Transformer子模型作为推理模型，将增强后的测试集输入推理模型，得到语音识别的结果。提升了数据的可用性和质量；减小模型宽度，提升模型鲁棒性，能够在保证模型精度的基础上降低模型深度，进一步实现模型轻量化。

公开(公告)号：CN112528690B

公开(公告)日：2022-06-07

申请号：CN202011304105.8

申请日：2020-11-19

申请人： 西安交通大学

发明人： 丁菡 ,  侯松江 ,  翟临威 ,  赵衰 ,  王鸽 ,  惠维 ,  赵鲲 ,  赵季中

IPC分类号： G06K7/10 ,  G06V10/764 ,  G06V10/774 ,  G06V10/74 ,  G06V10/82 ,  G06N3/04 ,  G01B15/04 ,  G01N23/00

摘要： 本发明公开了一种非接触式物品材质和形状识别方法、存储介质及计算设备，将待测物品放置在感知平面的指定检测区域，采集RFID阅读器和标签通信过程中各标签的ID、RSS值及相位参数，识别待测物品的形状和材质；进行相似度计算，根据所得结果判定待测物品所属的分类为见过的物品和未见过的物品；若为见过的物品，将采集到的RSS和相位信号进行特征提取得到最优特征，识别待测物品的材质和形状；若为未见过的物品，在隐空间中寻找与待测物品RF特征相似度最接近的文本特征，将文本特征相似度最高的对应文本作为待测物品的识别类别，识别待测物品的材质和形状。本发明成本低，实现跨环境，同时确定物品的形状和材质，识别未见过的即训练集中不存在的物品。

公开(公告)号：CN114067824A

公开(公告)日：2022-02-18

申请号：CN202111316293.0

申请日：2021-11-08

申请人： 西安交通大学

发明人： 丁菡 ,  王一展 ,  李昊 ,  赵衰 ,  王鸽 ,  惠维 ,  赵鲲 ,  赵季中 ,  王鹏 ,  董博

IPC分类号： G10L21/0208 ,  G10L21/0264 ,  G10L21/0216 ,  G10L25/30 ,  H04L25/02

摘要： 本发明公开了一种融合超声波信号特征的语音增强方法及系统，先预定义超声信号，再使用设备自带的扬声器和麦克风主动发射和接收超声信号，进行信道估计得到信道冲击响应作为反映用户说话时面部发声器官的运动特征作为语音的一种补充模态信息输入神经网络中实现语音增强。本发明充分利用了用户发声动作特征辅助语音增强任务，提高了语音增强效果，具有广泛的应用前景。

公开(公告)号：CN112964254A

公开(公告)日：2021-06-15

申请号：CN202110121796.6

申请日：2021-01-28

申请人： 西安交通大学

发明人： 高铭 ,  赵鲲 ,  惠维 ,  赵季中 ,  丁菡 ,  韩劲松

IPC分类号： G01C21/18

摘要： 本发明公开了一种惯性传感器共振隐蔽注入攻击的检测、防御方法及系统，属于移动感知与控制系统安全领域；所述方法基于注入攻击存在频谱混叠的特性，采用多采样率对运动进行采样，判断攻击是否存在；若存在，综合考虑惯性传感器的共振频率和不同采样率下奈奎斯克区的重叠，推算攻击频率，并实现运动信息与攻击信号的分离。本发明无需增加额外硬件，适用于已出场封装好的陀螺仪和加速度计，方便实用并高效地检测利用声波共振的惯性传感器注入攻击并在保证运动数据完整性的前提下去除攻击的影响，能够提高运动测量和驱动系统的安全性及可靠性。

公开(公告)号：CN112183136A

公开(公告)日：2021-01-05

申请号：CN202010969779.3

申请日：2020-09-15

申请人： 西安交通大学

发明人： 王鸽 ,  丁菡 ,  王一展 ,  赵衰 ,  惠维 ,  赵鲲 ,  蒋志平 ,  王志 ,  赵季中

IPC分类号： G06K7/10

摘要： 本发明公开了一种商用标签定向读取和实时追踪方法、存储介质及设备，采用一主一从的分布式天线阵列，分布式天线阵列的主发射器和从发射器交替发送同步信号，并测量发射天线与接收天线之间的相位偏移，对每个从发射器补偿一个初始相位使之与主发射器同步；进行快速搜索，查询与目标标签距离最近的参考标签，获取参考标签的响应信息；得到不同传输设置时的能量分布和有关为目标标签供能的设置信息，结合模拟退火算法和粒子滤波器动态选择传输参数激励目标区域的标签以及实时追踪目标标签的移动，完成对目标位置的商用标签进行定向读取和实时追踪。本发明大大降低了对目标标签定向读取和追踪的成本，具有广泛的应用前景。