公开(公告)号：CN117495998A

公开(公告)日：2024-02-02

申请号：CN202311529979.7

申请日：2023-11-16

Applicant: 西南交通大学

Inventor： 邢焕来 ,  况田泽宇 ,  冯力 ,  李洋 ,  滕飞 ,  张新有

IPC: G06T11/00 ,  G06N3/0475 ,  G06N3/0455 ,  G06N3/047 ,  G06N3/0895

Abstract: 本发明公开了一种多目标分段优化的图像语义通信框架，包括发送端模块、传统通信模块和接收端模块；发送端模块由语义编码器与信道编码器构成，接收端模块由信道解码器与语义解码器构成，传统通信模块由负责发送与接受的组件构成；在训练时，根据优化目标将系统的不同模块分别划分到两个训练阶段中：在第一个阶段，系统中的语义编码器和信道编解码器部分负责提取与传递图像的整体语义；在第二个阶段，系统中的语义解码器负责根据接受到的信息生成与原始图像语义一致的图像。本发明充分结合了高层和低层语义信息的优势，实现混合语义信息到图像的映射，提高了生成图像的质量，具备更强大的语义表达能力。