公开(公告)号：CN118887324A

公开(公告)日：2024-11-01

申请号：CN202410847378.9

申请日：2024-06-27

申请人： 派欧云计算(上海)有限公司

发明人： 胡扬

IPC分类号： G06T13/40 ,  G06T13/80 ,  G06V20/40 ,  G06V10/46 ,  G06V10/54 ,  G06N3/0455 ,  G06V10/44 ,  G06V10/42 ,  G06V10/80 ,  G06N3/0464 ,  G06V40/20

摘要： 本发明公开了一种动作引导的视频生成方法，通过获取动作视频，基于骨骼信息提取每一帧的关键点序列；获取参考图像，提取图像特征；将关键点序列及图像特征输入目标视频生成模型，所述目标视频生成模型基于关键点序列识别得到目标动作；基于图像特征，生成附加该图像特征的目标动作；并对目标动作进行序列预测，以保证生成视频前后帧的连续性。该方法能够让用户在不前往专业视频制作场所或学习专业视频编辑软件的情况下，通过线上平台生成具有特定动作或行为的视频内容。该方法不仅提高了视频生成效率，降低了成本，还为用户提供了更加个性化和多样化的选择。

公开(公告)号：CN118261999A

公开(公告)日：2024-06-28

申请号：CN202410341545.2

申请日：2024-03-25

申请人： 派欧云计算(上海)有限公司

发明人： 胡扬

IPC分类号： G06T11/00 ,  G06T5/30 ,  G06T5/70 ,  G06T5/60 ,  G06T3/4053 ,  G06N20/00

摘要： 本发明公开了一种风格化人像生成方法，包括如下步骤：由用户上传图像数据并进行数据处理得到训练用数据集。将训练用数据集放入模型中进行模型训练，得到生成模型，完成模型部署。由用户输入提示词，根据提示词和生成模型优先以较低权重合并人像LoRA生成初步人像图片。通过人脸检测模型对初步人像图片进行自动检测，检测到人像位置后，以人像区域的包围框作为掩码，对其进行图像膨胀以及高斯模糊，然后通过生成模型以较高权重再次合并人像LoRA进行细节重绘，得到高保真人像图片。本发明能实现人脸ID的高效提取、高保真的人脸重绘、隐私友好的生图流程。使得本发明实现了高效、灵活且用对户友好的风格化人像生成，提供更加丰富和个性化的图像生成体验。