Turbo4DGen:4D时代的超高速加速
Turbo4DGen: Ultra-Fast Acceleration for 4D Generation
专题配图图片仅供信息参考图片仅供参考版权归原作者摘要
Arxiv:2603.29572v2公告类型:替换-交叉摘要:4D生成,或动态3D内容生成,集成了空间、时间和视图维度来建模逼真的动态场景,在推进世界模型和物理AI方面发挥了基础性作用。然而,通过独特的空间相机运动(SCM)注意机制跨帧和视点保持长链一致性会带来大量的计算和内存开销,通常会导致内存不足(OOM)故障和令人望而却步的生成时间。为了应对这些挑战,我们提出了Turbo4DGen,一个用于基于扩散的多视点4D内容生成的超快加速框架。Turbo4DGen引入了一种时空缓存机制,该机制在去噪步骤中持久地重用中间注意力,结合动态语义感知的注意力剪枝和自适应SCM链旁路调度器,大大减少了冗余的SCM注意力计算。我们的实验结果表明,Turbo4DGen在ObjverseDy和Consistent4D数据集上的平均加速比为9.7倍,而质量没有下降。据我们所知,Turbo4DGen是第一个专门用于4D代的加速框架。
原始资料
arXiv cs.AI · 中文编译
查看来源原文 产品参数、测试条件及最新修订以来源原文为准。