行业
Gen4P 用视频生成器实现单目4D感知
Gen4P 提出统一框架,将预训练视频生成器改造为前馈式4D感知器,无需迭代去噪,单次编码即可从单目视频恢复4D几何与运动,并支持灵活时空采样。在3D点跟踪、视频深度和相机位姿估计上达到领先水平,展示了视频生成预训练用于统一4D感知的潜力。
行业落地·Hugging Face Papers·5 天前
先用站内已采集内容作答;站内不足时联网检索,每条结论都给出来源链接
1 条 · 点击可看原文全文与中文译文
Gen4P 提出统一框架,将预训练视频生成器改造为前馈式4D感知器,无需迭代去噪,单次编码即可从单目视频恢复4D几何与运动,并支持灵活时空采样。在3D点跟踪、视频深度和相机位姿估计上达到领先水平,展示了视频生成预训练用于统一4D感知的潜力。
现有资料不足以量化 Gen4P 相比扩散式 4D 感知方法的推理加速倍数。资料只定性说明其「无需迭代去噪、单次编码」1,未给出任何推理时延、FPS 或加速比的数字。 资料中可确认的部分:
从「迭代去噪 → 单次前馈」这一结构性变化可以推断,加速主要来自消除去噪步数带来的重复网络前向,但具体幅度取决于去噪步数与模型规模,资料未提供这些数据,因此无法给出数值结论。