公开(公告)号：CN116896546B

公开(公告)日：2023-12-26

申请号：CN202311142068.9

申请日：2023-09-06

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 王玉强 ,  许宝亮 ,  程宝平 ,  陶晓明 ,  范佳伟

IPC分类号： H04L65/1101 ,  H04L65/80 ,  H04N7/14

摘要： 本发明提供基于SRT通信协议的可视对讲方法、系统及存储介质，涉及可视对讲处理领域，所述方法包括：响应于第一请求信息；生成第一SRT推拉流地址；发送第一SRT推拉流地址至目标端，以与目标端建立第一SRT推拉流链接；生成第二SRT推拉流地址；发送第二SRT推拉流地址，以与客户端建立第二SRT推拉流链接；根据第一SRT推拉流链接以及第二SRT推拉流链接，传输音频数据和视频数据。将SRT协议与URL技术结合，通过第一SRT推拉流地址、第二SRT推拉流地址，能够便捷快速与媒体服务器建立链接，简化建立链接过程，在同一SRT推拉流链接通道上传输视频和音频，无需额外建立对讲通道，实现轻量化搭建链接。

公开(公告)号：CN116634178B

公开(公告)日：2023-10-31

申请号：CN202310920194.6

申请日：2023-07-26

申请人： 清华大学 ,  中移(杭州)信息技术有限公司

发明人： 程宝平 ,  陶晓明 ,  黄炎 ,  谢小燕 ,  田心阳 ,  王梨名 ,  刘素云

IPC分类号： H04N19/70 ,  H04N19/146 ,  G06T9/00 ,  G06N3/0475 ,  G06N3/094

摘要： 本申请实施例公开了一种极低码率的安防场景监控视频编解码方法及系统，可以极大地降低对安防场景监控视频的传输码率。该极低码率的安防场景监控视频编码方法包括：获取安防场景监控视频中的第一非关键帧；对所述第一非关键帧进行前背景分离，得到第一目标物体所对应的第一前景图，所述第一目标物体为所述第一非关键帧所包含的目标物体；对所述第一前景图进行语义信息提取，得到所述第一目标物体所对应的第一语义信息；将所述第一语义信息编码传输至接收端，以使所述接收端根据所述第一语义信息、以及所述安防场景监控视频的关键帧的背景图，重建所述第一非关键帧。

公开(公告)号：CN116886961A

公开(公告)日：2023-10-13

申请号：CN202311141647.1

申请日：2023-09-06

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 赵明昊 ,  陈荣沥 ,  程宝平 ,  陶晓明

IPC分类号： H04N21/2343 ,  H04N21/4402 ,  H04N21/2187

摘要： 本发明提供一种分布式直播视频插帧方法、设备、系统及存储介质，涉及直播视频插帧技术领域，所述方法包括：获取直播视频数据；对所述直播视频数据进行处理，以生成多组待处理帧组；向多个目标终端分别发送不同的所述待处理帧组，以指示所述目标终端对所述待处理帧组进行插帧处理形成中间帧；获取所述中间帧，根据所述直播视频数据以及所述中间帧进行处理，以形成直播插帧视频数据；发送所述直播插帧视频数据。利用多个目标终端对待处理帧组进行插帧处理形成中间帧，达到分布式插帧处理的效果，降低对终端性能的要求并且降低资源消耗，同时能够对多组待处理帧组并行处理，有利于缩短插帧处理耗时，提高插帧处理效率。

公开(公告)号：CN116886935A

公开(公告)日：2023-10-13

申请号：CN202311154266.7

申请日：2023-09-08

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 周骏华 ,  程宝平 ,  熊小颖 ,  骆建祥 ,  陶晓明

IPC分类号： H04N19/436 ,  H04N19/30 ,  H04N19/31

摘要： 本申请涉及视频处理领域，提供一种编码算力共享方法、装置及设备。所述编码算力共享方法运用于目标设备，包括：在第一业务运行的情况下，确定剩余硬编算力；在所述目标设备接收到第二业务的运行请求，且所述剩余硬编算力不满足所述第二业务的情况下，接收算力共享设备发送的编码算力；基于所述编码算力进行编码能力重塑；基于所述编码能力重塑在所述目标设备上同时运行所述第一业务和所述第二业务。本申请解决了目前当出现多个编码视频流需求的时候需要通过业务隔离来进行问题规避，且只能保证一个业务的运行的技术问题。

公开(公告)号：CN116684636B

公开(公告)日：2023-10-13

申请号：CN202310966321.6

申请日：2023-08-01

申请人： 清华大学 ,  中移(杭州)信息技术有限公司

发明人： 程宝平 ,  杜嘉伟 ,  谢小燕 ,  陶晓明 ,  付涛 ,  黄炎

IPC分类号： H04N19/51 ,  H04N19/42 ,  H04N19/503 ,  H04N19/70 ,  G06V40/16 ,  G06V20/40

摘要： 本发明提供了一种语义通信人脸重建优化方法、系统，涉及图像处理与计算机视觉技术领域。本发明实施例中，在传输过程中，针对参考帧（第一帧）传输其图像、运动关键点、以及轮廓关键点，针对驱动帧（第一帧后续其他帧）的传输只需要传输运动关键点，传输成本大幅降低，而人脸重建过程中，以参考帧图像的轮廓关键点作为轮廓约束，可以在少量增加传输信息的情况下，提高人脸重建的稳定性和准确度，缓解了生成人脸变形的问题。从而可以在低传输成本的前提下，稳定准确地完成人脸重建。解决了传统语义信息传输方法由于信息少，会导致目标重建效果差，失真的情况的问题。

公开(公告)号：CN116886935B

公开(公告)日：2023-12-26

申请号：CN202311154266.7

申请日：2023-09-08

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 周骏华 ,  程宝平 ,  熊小颖 ,  骆建祥 ,  陶晓明

IPC分类号： H04N19/436 ,  H04N19/30 ,  H04N19/31

摘要： 本申请涉及视频处理领域，提供一种编码算力共享方法、装置及设备。所述编码算力共享方法运用于目标设备，包括：在第一业务运行的情况下，确定剩余硬编算力；在所述目标设备接收到第二业务的运行请求，且所述剩余硬编算力不满足所述第二业务的情况下，接收算力共享设备发送的编码算力；基于所述编码算力进行编码能力重塑；基于所述编码能力重塑在所述目标设备上同时运行所述第一业务和所述第二业务。本申请解决了目前当出现多个编码视频流需求的时候需要通过业务隔离来进行问题规避，且只能保证一个业务的运行的技术问题。

公开(公告)号：CN116886678B

公开(公告)日：2023-12-05

申请号：CN202311142335.2

申请日：2023-09-06

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 范佳伟 ,  程宝平 ,  汪胜 ,  陶晓明

IPC分类号： H04L65/80 ,  H04L65/403 ,  H04L67/55

摘要： 本发明涉及计算机技术领域，提供一种异常码流过滤方法、系统、电子设备和存储介质，该方法包括：对接收到的第一设备码流进行第一次异常码流过滤，得到目标流数据；若确定进程异常退出，且进程异常退出为目标流数据导致，则生成core文件；对core文件进行解析，得到堆栈跟踪信息；根据堆栈跟踪信息进行第二次异常码流过滤，得到异常码流设备黑名单，基于异常码流设备黑名单对码流进行过滤。本发明对设备码流进行第一次异常码流过滤，使异常码流的防护更加全面及有效，同时，根据进程异常退出时的堆栈跟踪信息，反向识别异常码流设备并加入设备黑名单，有效阻挡异常码流在集群中的传播路径，提高了流媒体集群系统的可靠性、稳定性和容错性。

公开(公告)号：CN116886932A

公开(公告)日：2023-10-13

申请号：CN202311148638.5

申请日：2023-09-07

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 赖威 ,  程宝平 ,  谢小概 ,  黄攀 ,  陶晓明

IPC分类号： H04N19/30 ,  H04N19/132 ,  H04N19/124 ,  H04N21/4788

摘要： 本申请涉及数据传输领域，提供一种视频流传输方法、装置、终端设备及存储介质。所述方法包括：获取待传输的原始视频码流；对原始视频码流进行降采样和编码处理，得到基本编码码流；对原始视频码流的高频细节信息进行分离提取和量化编码处理，得到原始视频码流相对于基本编码码流的残差增强编码数据；将基本编码码流和残差增强编码数据整合为同一路目标视频流发送给视频接收方。本申请提供的视频流传输方法可以仅使用一路视频码流就能实现视频监控和实时音视频通话等功能，与并行处理两路视频码流相比，不仅可以减少内存资源消耗，降低硬件设备成本，还降低了视频传输总码率，从而减少对传输带宽的占用，减少视频播放卡顿、不流畅的现象。

公开(公告)号：CN116886678A

公开(公告)日：2023-10-13

申请号：CN202311142335.2

申请日：2023-09-06

申请人： 中移(杭州)信息技术有限公司 ,  清华大学

发明人： 范佳伟 ,  程宝平 ,  汪胜 ,  陶晓明

IPC分类号： H04L65/80 ,  H04L65/403 ,  H04L67/55

摘要： 本发明涉及计算机技术领域，提供一种异常码流过滤方法、系统、电子设备和存储介质，该方法包括：对接收到的第一设备码流进行第一次异常码流过滤，得到目标流数据；若确定进程异常退出，且进程异常退出为目标流数据导致，则生成core文件；对core文件进行解析，得到堆栈跟踪信息；根据堆栈跟踪信息进行第二次异常码流过滤，得到异常码流设备黑名单，基于异常码流设备黑名单对码流进行过滤。本发明对设备码流进行第一次异常码流过滤，使异常码流的防护更加全面及有效，同时，根据进程异常退出时的堆栈跟踪信息，反向识别异常码流设备并加入设备黑名单，有效阻挡异常码流在集群中的传播路径，提高了流媒体集群系统的可靠性、稳定性和容错性。

公开(公告)号：CN116708725A

公开(公告)日：2023-09-05

申请号：CN202310980716.1

申请日：2023-08-07

申请人： 清华大学 ,  中移(杭州)信息技术有限公司

发明人： 程宝平 ,  陶晓明 ,  尚子钦 ,  黄炎 ,  谢小燕

IPC分类号： H04N7/18 ,  H04N19/42 ,  G06V20/52 ,  G06N3/0455 ,  G06N3/0475 ,  G06N3/08 ,  G06V10/80 ,  G06V10/82 ,  G06V20/40

摘要： 本发明提供了一种基于语义编解码的低带宽人群场景安防监控方法及系统，涉及人工智能视频监控领域。本发明中，用户接口获取用户自定义信息，图像处理子系统获取针对人群的监控视频，并对监控视频中包括的连续多帧监控视频帧进行处理，将用户自定义信息作为指引信息，得到每一帧监控视频帧包括的目标对象的素描图和语义属性信息，并发送至图像重建子系统，按照预设周期发送监控视频帧包括的背景区域；图像重建子系统基于目标对象的素描图、语义属性信息和当前周期接收到的背景区域，重建监控视频帧。本发明采用语义编解码的方法，在传输和存储数据时有效压缩数据量，能够节省大量的带宽资源，降低传输成本，以在带宽受限的情况下实现高效的人群安防监控。