一种基于双分支级联注意力网络的实时语义分割方法

    公开(公告)号:CN117789212A

    公开(公告)日:2024-03-29

    申请号:CN202410040216.4

    申请日:2024-01-11

    摘要: 一种基于双分支级联注意力网络的实时语义分割方法,经处理得到初级特征图;初级特征图经过连续的基本残差卷积块和双分辨率模块,得到低分辨率特征图和高分辨率特征图;将步骤2得到的低分辨率特征图和高分辨率特征图输入至双分支级联注意力网络,得到特征图FA和FW2;将特征图FA作为低分辨率特征图、特征图FW2作为高分辨率特征图输入双分支级联注意力网络,得到高分辨分支输出特征图FH,低分辨率分支输出特征图FL;将特征图FL通过深度聚合金字塔池化模块、融合上采样,最终输出分割效果图。本方法能够优化注意力机制并减少计算量,实现高分辨分支和低分辨率分支之间的交互,实现卷积网络和注意力机制的互补,提高实时语义分割的性能。

    一种基于特征解纠缠对抗学习模型的图像卡通化方法

    公开(公告)号:CN118071889A

    公开(公告)日:2024-05-24

    申请号:CN202311365740.0

    申请日:2023-10-20

    摘要: 本发明公开了一种基于特征解纠缠对抗学习模型的图像卡通化方法,首先构建特征解纠缠对抗学习(FDAL)模型,然后对FDAL模型预训练,通过改进的损失函数使生成器网络学会内容图像的分布,判别器网络不参与训练、不输入任何风格信息;再使用全部的损失函数对生成器网络和判别器网络进行交替双阶段的训练,对内容信息和风格信息进行学习,直到模型收敛为止,对训练完成的模型测试,输出卡通化结果。本发明设计双重编码器和无偏的转换模块用于解纠提取的内容风格特征并进一步融合提取的内容风格特征编码嵌入,并构建双结构风格学习判别器,通过改进的损失函数用于对抗性的学习这两种卡通风格表示,其处理高分辨率图像卡通化效果显著。