多模态数据扩充方法、系统、介质、计算机设备及终端

    公开(公告)号:CN114399645A

    公开(公告)日:2022-04-26

    申请号:CN202111562183.2

    申请日:2021-12-20

    发明人: 李晖 张剑 吴杰 彭莹

    摘要: 本发明属于计算机数据处理技术领域,公开了一种多模态数据扩充方法、系统、介质、计算机设备及终端,在不改变任一模态数据语义信息的情况下,通过调整目标检测模型感受野中的图像内容,对图像特征进行扰动,从而自动化地进行数据扩充,达到了降低人工成本、提升数据扩充效率的效果,其提供的丰富数据能够提升下游任务的表现。本发明提供的多模态数据扩充方法,通过扩充图像特征来进行数据扩充,能够在不改变任一模态数据语义信息的情况下,自动进行数据扩充。因此,本发明不改变多模态训练数据中任一模态的语义信息,数据扩充效果好。同时本发明能够自动进行数据扩充,人工成本低、数据扩充效率高。