基于扩散模型的无训练指代图像分割方法

    公开(公告)号:CN116994258A

    公开(公告)日:2023-11-03

    申请号:CN202310971667.5

    申请日:2023-08-03

    Abstract: 一种基于扩散模型的无训练指代图像分割方法,属于计算机视觉中的指代图像分割领域。本发明针对现有数据匮乏情况下,难以实现指代图像分割的问题。包括:获取要进行指代图像分割的原始图像和文本,对原始图像增加高斯噪声后,经生成器得到交叉注意力函数的全部计算结果矩阵;在交叉注意力函数的全部计算结果矩阵中确定与核心词语位置对应的所有目标矩阵;再利用双线性插值算法对目标矩阵进行扩张,再均值化得到指代关系矩阵;再采用SAM模型对原始图像进行分割,得到多个候选分割结果矩阵;计算每个候选分割结果矩阵与指代关系矩阵的相似度,选择相似度最高的候选分割结果矩阵作为指代图像分割结果。本发明实现了无训练指代图像分割。

    单样本自适应域生成器迁移方法

    公开(公告)号:CN115272687A

    公开(公告)日:2022-11-01

    申请号:CN202210811744.6

    申请日:2022-07-11

    Abstract: 单样本自适应域生成器迁移方法,涉及就三级视觉中的图像生成和迁移学习领域。解决了使用现有的算法迁移后的目标生成器无法准确获取引导图风格及迁移后的图片多样性低的问题。本发明方法通过全局水平域迁移损失函数使迁移后的目标域生成器合成的图片拥有引导图的全局特征;设计了局部水平域迁移损失函数来解决现有技术无法准确获取引导图局部代表性特征的问题;利用逆映射器把合成图片映射到隐空间,并提出自适应属性保持损失函数来自适应的挑选和保持域共享的属性,从而使迁移后的图片保持了之前图片的部分属性,提高了合成图片的多样性,并通过给定一张目标域引导图即可实现对自适应域生成器的迁移。主要用于实现对自适应域生成器的迁移。

    单样本自适应域生成器迁移方法

    公开(公告)号:CN115272687B

    公开(公告)日:2023-05-05

    申请号:CN202210811744.6

    申请日:2022-07-11

    Abstract: 单样本自适应域生成器迁移方法,涉及就三级视觉中的图像生成和迁移学习领域。解决了使用现有的算法迁移后的目标生成器无法准确获取引导图风格及迁移后的图片多样性低的问题。本发明方法通过全局水平域迁移损失函数使迁移后的目标域生成器合成的图片拥有引导图的全局特征;设计了局部水平域迁移损失函数来解决现有技术无法准确获取引导图局部代表性特征的问题;利用逆映射器把合成图片映射到隐空间,并提出自适应属性保持损失函数来自适应的挑选和保持域共享的属性,从而使迁移后的图片保持了之前图片的部分属性,提高了合成图片的多样性,并通过给定一张目标域引导图即可实现对自适应域生成器的迁移。主要用于实现对自适应域生成器的迁移。

Patent Agency Ranking