结合语言与视觉想象的脑电分类方法、系统、设备及介质

    公开(公告)号:CN118885864A

    公开(公告)日:2024-11-01

    申请号:CN202410738239.2

    申请日:2024-06-07

    摘要: 本申请公开了一种结合语言与视觉想象的脑电分类方法、系统、设备及介质,该方法将语言想象和视觉想象结合的时域脑电图信号输入至第一分支,并根据通道注意力子模块对第一分支进行特征增强,得到第一分支的输出结果;将变换后的频域脑电图信号输入至第二分支,并根据通道注意力子模块对第二分支进行特征增强,得到第二分支的输出结果;将第一分支的输出结果和第二分支的输出结果输入至交叉注意力子模块,得到交叉注意力子模块的输出结果;根据交叉注意力子模块的输出结果、第一分支的输出结果和第二分支的输出结果,训练双分支脑电分类模型,以便采用训练好的双分支脑电分类模型对目标脑电图信号进行分类。本申请能够提高脑电图的分类准确率。

    一种多模复合人机交互系统和方法

    公开(公告)号:CN117891341A

    公开(公告)日:2024-04-16

    申请号:CN202410021336.X

    申请日:2024-01-05

    摘要: 本发明公开了一种多模复合人机交互系统和方法,脑机交互模块采集大脑神经信号,通过信号处理和模式识别方法提取出神经信号中所包含的使用者控制意图并完成指令判定得到脑电指令;眼动追踪模块实现标定和追踪功能,将三维的视线方向映射为屏幕上的二维注视点坐标,根据注视点坐标进行眼动模式识别,完成指令判定得到眼动指令;语音交互模块识别语音并进行控制指令匹配,完成指令判定得到语音指令;手势识别模块识别使用者的手势,根据识别的手势和预设的手势‑指令对应关系完成指令判定得到手势指令;多模复合人机交互决策层融合模块根据脑电指令、眼动指令、语音指令、手势指令和预设的决策融合原则得到最后的控制指令,完成对外部设备的控制。

    一种脑电拨号方法
    4.
    发明公开

    公开(公告)号:CN111857351A

    公开(公告)日:2020-10-30

    申请号:CN202010742685.2

    申请日:2020-07-29

    摘要: 本发明具体公开了一种脑电拨号方法,所述方法包括以下步骤:S1、首先将左手MI任务、右手MI任务以及空闲状态三种状态进行有序编码形成一个编码表,所述编码表中包括十二个长度均为三的序列,且编码表中的序列与拨打电话操作过程中的操作指令一一对;S2、使用者根据编码表和拨打电话的操作指令进行运动想象任务,脑电波检测设备根据使用者的运动想象任务获取对应的脑电图并传输给计算机;S3、计算机根据步骤S2中获取的脑电图信号进行分类处理,得到对应的操作指令,从而实现脑机的自动拨号。本发明实现了使用者仅凭意念即可拨打电话,对持枪军人、忙碌人群等都有较大意义,提高了运动功能障碍患者的生活自理能力,降低了其家庭与社会的负担。

    一种基于脑电图信号的脑机接口认知状态识别方法

    公开(公告)号:CN118395324A

    公开(公告)日:2024-07-26

    申请号:CN202410440935.5

    申请日:2024-04-12

    摘要: 本申请公开了一种基于脑电图信号的脑机接口认知状态识别方法,通过采用多个导电极的脑电帽获取原始脑电图信号;构建包含特征提取模块、通道和频率注意力模块、卷积模块和分类模块的认知状态识别网络模型;对原始脑电图信号采用特征提取模块得到时频图;将时频图输入至通道和频率注意力模块中,得到通道和频率注意力模块输出的特征图;通道和频率注意力模块用于动态调整不同通道的权重;将通道和频率注意力模块输出的特征图经过卷积模块中的多个卷积层和多个池化层,得到卷积模块输出的特征图;将卷积模块输出的特征图展开为一维特征向量;采用分类模块对一维特征向量进行分类得到认知状态识别结果。本申请能够准确识别大脑的高级认知状态。

    基于元正则化和距离约束的图像元学习域泛化方法及系统

    公开(公告)号:CN118262182A

    公开(公告)日:2024-06-28

    申请号:CN202410686315.X

    申请日:2024-05-30

    摘要: 本发明公开了一种基于元正则化和距离约束的图像元学习域泛化方法及系统,本发明方法包括为源域建立图像分类模型,建立一个嵌入网络;将源域数据划分为元训练集和元测试集,基于元训练集计算交叉熵分类损失,更新图像分类模型的网络参数;利用更新参数后的特征提取器,基于元测试集进行编码后再元正则化,再利用分类器进行分类计算交叉熵分类损失,基于嵌入网络映射到低维空间后计算距离约束损失,对交叉熵分类损失和距离约束损失进行加权求和并进行分类模型网络和嵌入网络的参数更新;重复上述步骤直至完成训练。本发明旨在帮助分类模型更好地适应目标域的未见样本,提高脑影像分类模型在目标域未见数据上的泛化性能。

    三人脑机接口协同决策系统及方法

    公开(公告)号:CN112733606B

    公开(公告)日:2023-05-23

    申请号:CN202011447935.6

    申请日:2020-12-11

    摘要: 本发明提供了一种三人脑机接口协同决策系统及方法。所述三人脑机接口协同决策的方法包括以下步骤:步骤S1、脑机接口准备工作:三个被试者准备开始脑机接口识别工作,每台显示器内容分别为进行N*N*N Cube编码后各维度对应的N个横截面;三名被试者对备选任务进行识别,获取分类器参数;步骤S2、获取待识别任务,生成任务列表:根据N3个备选任务,随机生成多个待识别任务,多个待识别任务组成任务列表;步骤S3、三名被试者完成第二次试验,根据任务提示注视各自屏幕上目标字符的闪烁面,分别获得目标所在的面坐标。本发明利用脑机接口多人协同决策,通过三个维度的坐标可以实现多个任务,识别速度高,并突破了传统范式对可识别任务个数的限制。

    一种基于脑电和眼动信号的射击控制系统及控制方法

    公开(公告)号:CN112764547B

    公开(公告)日:2022-08-16

    申请号:CN202110168442.7

    申请日:2021-02-07

    IPC分类号: G06F3/01 G06N3/08 G06N3/04

    摘要: 本发明公开了一种基于脑电和眼动信号的射击控制系统及控制方法,包括显示屏、眼动信号提取装置、脑电信号提取装置和处理器,所述显示屏与处理器相连,用于显示运动目标、瞄准框、武器发射情况和射击结果;眼动信号提取装置与处理器相连,用于提取操作人员的眼动信号,送至处理器,使瞄准框依据眼动信号产生相应移动;脑电信号提取装置与处理器相连,用于提取操作人员的脑电信号,并将脑电信号送至处理器;处理器识别并处理采集到的眼动信号和脑电信号,并产生瞄准框移动和发射信号。本发明采用眼动信号检测技术和脑机接口技术与传统的操作相结合,增加了人作为控制信号信源的输出通道,更高效地完成人机协同动态目标瞄准、跟踪和打击任务。