StableVideoDiffusion
效果不错,可自动判断需要出现动态的位置,并且自动判断应该如何运动动。同时也不会产生涉及到复杂的内容(比如人脸)的时候画面崩坏的问题,非常稳定。
用的Colab里面的V100显卡,没有A100了,16G显存刚好够25帧的视频生成。生成时间大概144秒。
就是这个对硬件要求实在太高,希望社区大佬给力一些,优化到可以本地跑。下面是测试生成的视频。
演示视频 https://m.okjike.com/originalPosts/655dc48b87a8e03bd15c8eca 测试了一下 #StableVideoDiffusion ,说 - 即刻App
SEINE
SEINE人工智能工具的主要优点包括: 1. **多功能性**:SEINE能处理各种查询,包括一般知识问题、创意写作、数据分析和图像创作。 2. **图像生成能力**:它能根据用户的描述创造出详细的图像,这对于视觉艺术家和创意专业人士尤其有用。 3. **编程能力**:通过Python环境,SEINE可以执行复杂的计算和数据分析任务。 4. **最新信息访问**:尽管其训练数据只到2023年4月,但它可以通过内置的浏览器工具访问和引用最新的网络信息。 5. **语言理解和生成**:SEINE能够理解和生成流利、准确的文本,这使它在进行自然语言处理方面特别强大。 6. **定制化回答**:它能根据用户的具体需求定制答案,无论是简短的答案还是需要深入分析的复杂问题。 7. **多语言支持**:虽然主要以英语交流,但SEINE还支持其他语言,包括中文,使其可以服务于更广泛的用户群体。 这些特点使SEINE成为一个非常强大且多才多艺的工具,适用于多种不同的应用场景。
演示视频 https://m.okjike.com/originalPosts/655c78daf9a492630b2f88d9 之前说过的 SEINE 视频生成模型,代码已经开源,我自己试 - 即刻App
Runway
a)目前还只擅长比较慢速的运动,比如着火、云朵漂移、烟雾飘散、人物缓慢抬头,详细介绍在这里。
b)免费额度大概125秒,每玩一次消耗4秒。
c)油管上的简介和详细介绍视频(需魔法)
演示视频 https://mp.weixin.qq.com/s/HciZfrSQqHl4ZV6ropvexQ 图片变视频只需一“指”!Gen-2运动笔刷免费上线,网友:史上最强更新