公开(公告)号：CN116072090A

公开(公告)日：2023-05-05

申请号：CN202310033641.6

申请日：2023-01-10

申请人： 成都信息工程大学 ,  四川音乐学院

发明人： 乔少杰 ,  徐康镭 ,  王文 ,  韩楠 ,  魏盛杰 ,  黄江涛 ,  林印吉 ,  黄萍 ,  李勇 ,  刘志晟 ,  郑龙吟 ,  周倬屹 ,  田野 ,  郑皎凌 ,  王邦平 ,  王超 ,  李耀 ,  闵圣捷 ,  余华

IPC分类号： G10H1/00 ,  H04N21/439 ,  H04N21/233

摘要： 本发明公开了一种基于强化学习的短视频自动配乐方法及系统，该方法包括构建自适应视频编码器，提取视频深度特征；获取短视频配乐的MIDI文件，构建音频编码器，从MIDI格式文件提取多组音频特征向量集；将视频特征作为输入，音频特征向量集作为输出，构建基于强化学习的短视频配乐模型；根据强化学习配乐模型，设计采样方法得到配乐特征向量集；将配乐特征向量集解码为MIDI格式文件，完成短视频自动配乐。本发明解决了人工短视频配乐的选择困难、需要音乐背景知识和常识、音乐版权侵权等问题，大大提高短视频配乐的速度和质量，实现自动配乐。