- 专利标题: 基于3D高斯的高效流式传输的低比特率自由视点视频生成方法、计算机设备、可读存储介质和程序产品
-
申请号: CN202410680197.1申请日: 2024-05-29
-
公开(公告)号: CN118573978A公开(公告)日: 2024-08-30
- 发明人: 赵磊 , 焦涵 , 贾世安 , 林怀忠 , 孙嘉锴 , 尹浩霖 , 蓝泽铧 , 莫俊程 , 马骋 , 张权威 , 王永康 , 陈嘉芙 , 褚天易 , 饶晨 , 张占杰 , 李光远 , 张玮婧 , 王欣宇 , 邢卫
- 申请人: 浙江大学
- 申请人地址: 浙江省杭州市西湖区余杭塘路866号
- 专利权人: 浙江大学
- 当前专利权人: 浙江大学
- 当前专利权人地址: 浙江省杭州市西湖区余杭塘路866号
- 代理机构: 杭州合信专利代理事务所
- 代理商 黄平英
- 主分类号: H04N21/8549
- IPC分类号: H04N21/8549 ; H04N21/81 ; G06T15/00 ; G06T17/00
摘要:
本申请涉及一种基于3D高斯的高效流式传输的低比特率自由视点视频生成方法、计算机设备、可读存储介质和程序产品。生成方法包括:构建基于3D高斯的三维场景,3D高斯包括在初始帧构建的结构化3D高斯、以及在后续帧出现的自由3D高斯,3D高斯具有源于结构化3D高斯的第一类位置点、以及源于自由3D高斯的第二类位置点;将每个锚点关联至相应组别内所有的第一类位置点,使被关联的第一类位置点依附于相应的锚点;对于任意一组,获得锚点自身信息、以及关联信息,将二者映射至结构化3D高斯的协方差矩阵;逐帧优化3D高斯,包括间接优化第一类位置点及其属性、以及直接优化第二类位置点及其属性,渲染得到后续帧图像。