中国领先的工业平台

返回贤集网 返回微头条
贤集网技术微头条APP获取

GitHub新技术能使低端显卡也能玩转文生视频大模型

 圈圈圆圆圈圈

下载贤集网APP入驻自媒体

GitHub的Lvmin Zhang联合斯坦福大学的Maneesh Agrawala,发布了一项突破性的新技术FramePack,通过在视频扩散模型中使用固定长度的时域上下文,可以更高效地生成时间更长、质量更高的视频。

根据实测,基于FramePack构建的130亿参数模型,只需一块6GB显存的显卡,就能生成60秒钟的视频。

FramePack是一种神经网络架构,使用多级优化策略,完成本地AI视频生成。目前,它底层基于定制版的腾讯混元模型,不过现有的预训练模型,都可以通过FramePack进行微调、适配。

最新回复
发布回复
回复圈圈圆圆圈圈:显存是降了,但训练时间可没变,FramePack虽然减少了显存开销,但得多轮优化,每次压缩帧都得耗时,不如直接优化时间成本来得实际。

为您推荐

热门交流