基于几何约束的单目四维视频生成方法、装置和电子设备
申请号:CN202511081208
申请日期:2025-08-04
公开号:CN121000942A
公开日期:2025-11-21
类型:发明专利
摘要
本公开的实施例公开了基于几何约束的单目四维视频生成方法、装置和电子设备。该方法的一具体实施方式包括:对单目视频帧序列进行视频几何动态信息提取,得到视频几何动态信息;根据静态区域三维点云,对初始深度图序列进行对齐校正,生成对齐校正后深度图序列;将对齐校正后深度图序列输入相机投影模型,得到视频帧三维点云序列;生成动态三维点云序列和静态三维点云序列;生成动态初始高斯点云和静态背景高斯点云;对初始点云变换模型进行几何约束更新,得到更新后点云变换模型;根据静态背景高斯点云、动态初始高斯点云及更新后点云变换模型,生成单目四维视频。该实施方式可以提高单目四维视频的质量和渲染效率。
技术关键词
动态遮罩
点云
视频帧
序列
深度图
视频生成方法
相机
投影模型
深度预测模型
实例分割模型
视频生成装置
电子设备
运动识别
处理器
校正单元
存储装置
程序