南洋理工开源创新性文生视频模型FreeInit

JS滚动广告
✨ AI前沿 | 每日人工智能最新资讯 ✨

南洋理工大学S实验室的研究人员开源了一种创新性文生视频模型,名为FreeInit。他们发现视频扩散模型在生成视频时存在时间一致性不足和不自然的动态效果。为了解决这个问题,他们提出了一种通过重新初始化噪声的方法来改善时间一致性。他们开源了FreeInit的代码和论文,供研究者们参考和使用。通过多次重复迭代,FreeInit可以进一步累积提升低频信息质量,逐步弥合训练和推理的初始化差距,从而改善生成视频的质量和时间一致性。

发表评论