公开(公告)号：CN116895100A

公开(公告)日：2023-10-17

申请号：CN202310745242.2

申请日：2023-06-21

Applicant: 大连理工大学

Inventor： 吴晓寒 ,  王波 ,  唐烨灵

IPC: G06V40/40 ,  G06V40/16 ,  G06V10/52 ,  G06V10/764 ,  G06V10/80 ,  G06V10/82 ,  G06N3/042 ,  G06N3/045 ,  G06N3/09

Abstract: 本发明公开了一种基于空频特征融合的知识蒸馏深度伪造检测方法及系统，包括：构建知识蒸馏框架下的教师模型和学生模型，所述教师模型和所述学生模型均采用空频融合分支作为骨干网络；利用原始图像训练教师模型；用成对的原始图像和压缩图像输入知识蒸馏框架的方式训练学生模型，所述学生模型训练过程中，所述教师模型的空频特征、软标签和所述学生模型的硬标签作为所述学生模型的监督；利用训练好的学生模型进行图像的深度伪造检测。本发明将空域和频域信息集成在知识蒸馏框架内，以实现高效的深度伪造检测，该方法在压缩场景下性能优越。

公开(公告)号：CN118016046A

公开(公告)日：2024-05-10

申请号：CN202311797110.0

申请日：2023-12-26

Applicant: 大连理工大学

Inventor： 唐烨灵 ,  吴卓澄 ,  曹桢煜 ,  王波

IPC: G10L13/04 ,  G10L13/06 ,  G10L25/30

Abstract: 本发明公开了基于频域‑时域知识蒸馏的低质量压缩语音深度伪造检测方法，该方法采用知识蒸馏作为主要框架，使用数据蒸馏的方式，用高质量数据去训练教师模型，低质量数据去训练学生模型，然后采用频域和时域蒸馏，使得学生模型可以从教师模型那学到压缩数据丢失的频域和时域信息，从而提高低质量数据的伪造检测性能。需要说明的是训练蒸馏模型的高质量数据和低质量数据是配对的，使用有损压缩算法去压缩高质量数据集得到对应的低质量压缩数据集。本发明的频域‑时域知识蒸馏不仅可以提高低质量压数据的检测性能，同时也适用于高质量语音数据的伪造检测，提高检测性能。