一种基于令牌封装与增强的视觉Transformer轻量化方法及系统

    公开(公告)号:CN117592525A

    公开(公告)日:2024-02-23

    申请号:CN202311576896.3

    申请日:2023-11-23

    发明人: 唐胜 房海鹏 曹娟

    摘要: 本发明提出一种基于令牌封装与增强的视觉Transformer轻量化方法,包括:以视觉Transformer网络构建视觉模型;划分目标图像为多个图像块,将该图像块编码为图像令牌,对该图像令牌依重要性分类为高重要性令牌和低重要性令牌,将该低重要性令牌的信息封装至该代理令牌;以预设的注意力增强矩阵对该高重要性令牌、该分类令牌和封装后的代理令牌进行增强,生成该视觉模型的模型输入;以该视觉模型对该模型输入进行处理操作。本发明还提出一种基于令牌封装与增强的视觉Transformer轻量化系统,以及一种用于实现基于令牌封装与增强的视觉Transformer轻量化方法的数据处理装置。

    基于时序趋势预测的虚假新闻检测方法及系统

    公开(公告)号:CN116894184A

    公开(公告)日:2023-10-17

    申请号:CN202310728444.6

    申请日:2023-06-19

    摘要: 本发明提出一种基于时序趋势预测的虚假新闻检测方法,包括:提取新闻样本的新闻表征;将该新闻表征进行聚类以获取至少一个主题簇;以每个主题簇的新闻样本按时序分布,建模为对应新闻主题的数据模型,基于该数据模型,预测该新闻主题的时序分布趋势;基于该时序分布趋势将各主题簇的新闻样本进行重加权后合并为训练集;以该训练集对虚假新闻检测器进行训练;通过该虚假新闻检测器对目标新闻进行虚假新闻检测。本发明还提出一种基于时序趋势预测的虚假新闻检测系统,以及一种用于实现基于时序趋势预测的虚假新闻检测的数据处理装置。

    特定人物丑化图片识别方法及系统

    公开(公告)号:CN111832622A

    公开(公告)日:2020-10-27

    申请号:CN202010531569.6

    申请日:2020-06-11

    IPC分类号: G06K9/62 G06N3/04 G06N3/08

    摘要: 本发明提出一种特定人物丑化图片识别方法和系统,包括:获取包含特定人物的图片集,该图片集包括多张漫画和多张照片,该图片集中每张图片标有代表是否丑化的预设标签,以该图片集中漫画和照片分别作为训练数据,训练卷积神经网络模型,得到特定人物漫画识别网络和特定人物照片识别网络;通过前置网络判断待识别图片是否属于漫画,若是,则将该待识别图片发送至该特定人物漫画识别网络,得到该待识别图片的特定人物丑化图片识别结果,否则对该待识别图片进行人脸对比,判断该待识别图片是否包括该特定人物,若是则通过该特定人物照片识别网络,得到该待识别图片的特定人物丑化图片识别结果,否则得到该待识别图片不包括该特定人物的识别结果。

    一种长尾目标检测方法与系统

    公开(公告)号:CN111832406A

    公开(公告)日:2020-10-27

    申请号:CN202010508103.4

    申请日:2020-06-05

    IPC分类号: G06K9/00 G06K9/34 G06K9/62

    摘要: 本发明提出的基于平衡分组Softmax的长尾目标检测方法与系统,该方法在网络结构上,改变网络的最后一个全连接层,对拥有不同训练样本数量的类别进行分组,将背景类别单独分为一组,在每组中都加入其它类别;在训练过程中,按照组内普通类别训练样本数量采样一定数量的其它类别样本进行训练,并在每个组内分别用Softmax函数激活并计算交叉熵损失;在测试过程中,在每个组内分别用Softmax函数激活,去掉组内其它类别,仅保留正常类别得分,用背景组的“其它”类别得分为所有正常类别加权,组成最终得分,用于后处理。该发明提升了在大规模长尾目标数据集上的目标检测以及实例分割性能。

    基于特征图恢复的场景分割方法和系统

    公开(公告)号:CN109034198A

    公开(公告)日:2018-12-18

    申请号:CN201810664250.3

    申请日:2018-06-25

    发明人: 唐胜 张蕊 李锦涛

    IPC分类号: G06K9/62

    摘要: 本发明涉及一种基于特征图恢复的场景分割方法和系统,包括对原始图像进行降采样,得到降采样图像,通过特征学习网络得到该降采样图像的降采样特征图,将该降采样特征图的尺寸恢复为原始图像尺寸,得到上采样特征图,将该上采样特征图输入场景分割网络,得到该原始图像的场景分割结果。本发明利用降采样输入图像可以获得的较快的分割速度;利用原始大小输入图像可以获得的较高的分割精度。此外,本发明还提出了辅助中间层监督和边境区域重加权的方法辅助场景分割神经网络模型的优化过程,从而在保持模型加速的前提下提升加速后模型的分割精度。

    一种数字图像训练和检测方法

    公开(公告)号:CN101661559B

    公开(公告)日:2013-03-06

    申请号:CN200910092710.0

    申请日:2009-09-16

    IPC分类号: G06K9/62 G06K9/00

    摘要: 本发明提供一种数字图像训练方法以及利用该训练方法的图像检测方法。其中该训练方法包括下列步骤:提取训练样本的图像特征;根据所述图像特征对所述训练样本进行聚类分析,将所述训练样本分为多个子类;对于每个子类,根据所述图像特征进行SVM训练,生成SVM模型。利用该训练方法所获得的多个SVM模型进行图像检测,检测准确率高、且具有较佳推广性和较高时效性。

    一种数字图像训练和检测方法

    公开(公告)号:CN101661559A

    公开(公告)日:2010-03-03

    申请号:CN200910092710.0

    申请日:2009-09-16

    IPC分类号: G06K9/62 G06K9/00

    摘要: 本发明提供一种数字图像训练方法以及利用该训练方法的图像检测方法。其中该训练方法包括下列步骤:提取训练样本的图像特征;根据所述图像特征对所述训练样本进行聚类分析,将所述训练样本分为多个子类;对于每个子类,根据所述图像特征进行SVM训练,生成SVM模型。利用该训练方法所获得的多个SVM模型进行图像检测,检测准确率高、且具有较佳推广性和较高时效性。