公开(公告)号：CN116468820A

公开(公告)日：2023-07-21

申请号：CN202310440697.3

申请日：2023-04-19

Applicant: 山东大学

Inventor： 武蕾 ,  程振威 ,  王昌硕 ,  孟祥旭

IPC: G06T11/00 ,  G06T11/60 ,  G06T7/11 ,  G06N3/0475 ,  G06N3/045

Abstract: 本发明提出了风格引导的草图生成场景图像方法及系统，涉及机器学习、计算机视觉技术领域，获取包含多个物体的一张场景草图；对场景草图进行分割检测，得到多张前景草图和一张背景草图；将每张前景草图及图中物体对应的风格引导图像输入到训练好的前景生成模型中，得到每张前景草图的目标前景图像；将所有前景草图的目标前景图像和背景草图输入到训练好的背景生成模型中，生成一张目标图像；本发明基于一张包含多个目标物体的场景草图及对应的风格引导，使用端到端的生成方法，生成高质量的逼真图像，保证了结构的准确性和纹理的合理性；而且使用对比学习策略来学习不同类别物体之间的纹理差异，使得整体网络训练更加稳定，提高网络的泛化能力。

公开(公告)号：CN115984400A

公开(公告)日：2023-04-18

申请号：CN202310017592.7

申请日：2023-01-06

Applicant: 山东大学

Inventor： 武蕾 ,  吕星明 ,  程振威 ,  孟雷 ,  孟祥旭

IPC: G06T11/00 ,  G06T11/20 ,  G06T7/13 ,  G06N3/0464 ,  G06N3/088 ,  G06N3/094

Abstract: 本发明公开了基于手绘草图的图像自动生成方法及系统，涉及计算机视觉图像处理技术领域。包括：获取手绘草图和草图对应的彩色图像，构建训练集与测试集；构建图像自动生成模型，使用训练集数据对图像自动生成模型进行对抗训练；将测试集输入至训练好的图像自动生成模型中，生成对应的彩色图像。本发明图像自动生成模型中形状判别器关注生成图像的形状，约束生成图像的形状，使生成图像形状合理化，针对性地解决了生成图像中物体形变、线条扭曲等问题；而图像全局注意力模块关注生成图像的整体，使生成图像的整体色泽、纹理等与图像形状适配，解决色泽、纹理失真的问题，二者结合提高了生成图像的质量。