FramePack模型介绍

FramePack 是斯坦福大学研究者、ControlNet 作者 Lvmin Zhang 与 Maneesh Agrawala 联合开发的开源视频扩散模型,旨在降低高端硬件依赖,让普通消费级设备也能生成长达数分钟的高质量视频。其核心通过动态帧压缩技术和抗漂移采样策略,将视频生成的计算复杂度与时长解耦,实现显存需求和生成质量的双重优化。

新技术突破硬件限制:
• 动态帧压缩:将视频生成复杂度与时长解耦
• 抗漂移采样:保持画质同时降低80%显存需求
实测RTX 3060显卡即可生成4分钟高清视频,真正实现消费级硬件畅玩AI影视创作。

星海智算平台已经为大家部署好这个镜像,开箱即用,下面为大家介绍一下,如何在星海智算平台上使用。

星海智算-GPU算力云平台https://gpu.spacehpc.com/user/register?inviteCode=57833422

启动应用  

首先,进入星海智算平台,点击【GPU实例】,即可创建实例。

图片

在【选择配置】中,可选择不同区域的显卡。

图片

【镜像市场】中选择FramePack镜像确认后在实例创建页面点击<立即创建>即可。

图片

等待模型自动创建开机(大约需要2分钟

图片

图片

创建成功等待4-5分钟,看到<运行中>即可开始使用。Framepack可以选择Windows或是Linus系统登录,以下是两种登录方式。点击win+R即可进入远程镜像,复制右侧的账号和密码,进入镜像应用。

图片

图片

镜像操作  

01.进入镜像界面

进入镜像

图片

02.设置参数

页面打开后,在Image框格内存放准备好的照片

图片

在下方框格内填入提示词

图片

参数方面可以根据自己的需求进行适当调整

图片

点击生成,等待后会生成结果。

图片

Logo

电影级数字人,免显卡端渲染SDK,十行代码即可调用,工业级demo免费开源下载!

更多推荐