基于时空分解与对齐的端到端动作视频生成方法及系统

    公开(公告)号:CN117710850A

    公开(公告)日:2024-03-15

    申请号:CN202311575656.1

    申请日:2023-11-23

    IPC分类号: G06V20/40 G06V10/46

    摘要: 本发明提出一种基于时空分解与对齐的端到端动作视频生成方法,包括:构建视频生成模型,以一组姿势关键点、参考前景及参考背景作为该视频生成模型的模型输入,以目标动作视频作为该视频生成模型的模型输出;将该目标动作视频的原始视频空间分解为多组时空子空间,通过动作流引导使各组时空子空间的子空间特征对齐;将对齐后的各组时空子空间恢复为该原始视频空间,并得到该目标动作视频。本发明还提出一种基于时空分解与对齐的端到端动作视频生成系统,以及一种用于实现基于时空分解与对齐的端到端动作视频生成的数据处理装置。

    人物丑化图像识别和模型训练方法与装置

    公开(公告)号:CN113627498B

    公开(公告)日:2024-03-12

    申请号:CN202110854800.X

    申请日:2021-07-28

    摘要: 本发明公开了一种人物丑化图像识别模型训练方法,包括以下步骤:将真实图像样本输入到丑化分类器中进行训练以使该其具有图像分类和图像特征提取的功能;冻结该丑化分类器的网络参数并将其作为图像特征提取器,将噪声和该真实图像样本输入到分类有益生成对抗网络进行训练以使其具有生成合成图像样本的功能;将该分类有益生成对抗网络生成的合成图像样本输入到该丑化分类器中进行进一步训练,得到该丑化分类器即为该人物丑化图像识别模型。

    基于一致性特征的场景分割方法和系统

    公开(公告)号:CN110472493B

    公开(公告)日:2022-01-21

    申请号:CN201910604601.6

    申请日:2019-07-05

    IPC分类号: G06K9/00

    摘要: 本发明提出一种基于一致性特征(ConsensusFeatures)的场景分割方法和系统,包括对特征提取器学习到的特征进行实例一致性变换和类别一致性变换,将变换后的特征输入到场景分割子网络,得到原始图像的场景分割结果。本发明提出了一种通过实例一致性变换单元去学习实例层次的一致性特征。另一方面,由于在场景图像中存在着多个同类实例,本发明使用类别一致性单元去学习类层次的一致性特征。这两个单元极大地提高了现有基于全卷积的场景分割模型的性能。

    人物丑化图像识别和模型训练方法与装置

    公开(公告)号:CN113627498A

    公开(公告)日:2021-11-09

    申请号:CN202110854800.X

    申请日:2021-07-28

    摘要: 本发明公开了一种人物丑化图像识别模型训练方法,包括以下步骤:将真实图像样本输入到丑化分类器中进行训练以使该其具有图像分类和图像特征提取的功能;冻结该丑化分类器的网络参数并将其作为图像特征提取器,将噪声和该真实图像样本输入到分类有益生成对抗网络进行训练以使其具有生成合成图像样本的功能;将该分类有益生成对抗网络生成的合成图像样本输入到该丑化分类器中进行进一步训练,得到该丑化分类器即为该人物丑化图像识别模型。

    基于特征图恢复的场景分割方法和系统

    公开(公告)号:CN109034198B

    公开(公告)日:2020-12-11

    申请号:CN201810664250.3

    申请日:2018-06-25

    发明人: 唐胜 张蕊 李锦涛

    IPC分类号: G06K9/62

    摘要: 本发明涉及一种基于特征图恢复的场景分割方法和系统,包括对原始图像进行降采样,得到降采样图像,通过特征学习网络得到该降采样图像的降采样特征图,将该降采样特征图的尺寸恢复为原始图像尺寸,得到上采样特征图,将该上采样特征图输入场景分割网络,得到该原始图像的场景分割结果。本发明利用降采样输入图像可以获得的较快的分割速度;利用原始大小输入图像可以获得的较高的分割精度。此外,本发明还提出了辅助中间层监督和边境区域重加权的方法辅助场景分割神经网络模型的优化过程,从而在保持模型加速的前提下提升加速后模型的分割精度。