丰色 发自 凹非寺 量子位|公众号QbitAI
“指”哪动哪,Gen-2全新“神笔马良”功能宣布正式上线:
所有用户包含免费账户(划重点)都能体验。
它的正式名叫“运动笔刷”(Motion Brush),十天前预告的时候就爆火。
只需对着图像任意位置一刷,就能让静止的一切物体动起来。
如Runway所说,这项新功能的意义非凡,是生成模型可控性上的一个重要里程碑。
有做了16年后期制作的网友证明它没夸张:
这是我职业生涯中见过的最具革命性、最令人印象深刻的产品。
具体玩法
首先,进入Runwayml主页,点击粉色的“Start with image”按钮:
随即我们就能来到功能页,正上方会显示你的免费额度,一般有大概125秒,每玩一次消耗4秒。
点击“upload”上传一张图片即可开始创作。
当然,你也可以用提示词先自己生成一张,然后点击“Free Preview”打开预览,选择一张你满意的结果作为样图。
接着点击“运动笔刷”按钮进入新页面,在此开始刷刷刷,可以选择不连续的元素。
在下方,咱们还可以精准控制:
(1)运动的水平和垂直幅度,负值分别代表向左、向下;
(2)“proximity”值,大致体验是控制元素渐渐消散/模糊/溶解的程度,可以选择0保持移动前后形状不变。
然后依次点击保存、生成就可以了。
我们也简单试玩了一下,实际生成时间大概在2分钟左右。
选了一张雪花图,做了如下设置。
效果如下:
不得不说,这一动起来真的很有氛围感。
不过,我们后续测试则发现:
目前这个功能现阶段还只擅长比较慢速的运动,比如着火、云朵漂移、烟雾飘散、人物缓慢抬头这种,如果想实现小猫甩尾巴的场景还是有点难为它。
还有3大更新
除了上面这超好玩的运动笔刷,Gen-2还一并上线了另外3项大大小小的更新。
一个是风格预设。
如Runway所说,对生成效果的控制不仅关乎动作,也包含风格。
在此,他们率先推出了26个无需复杂提示就能选用的视频滤镜。
也就是说,不用你专门写提示词描述,要什么风格/滤镜的视频现在直接套模板就行,动画、像素、电影、朋克、复古、3D卡通风格……应用尽有。
第二个是导演模式下的摄像头精准控制。
简单来说,就是你可以对视频画面的拉近、放远、左右平移、上下平移进行精确到小数点后一位的控制,轻松让视频看起来拥有大片质感。
特别值得一提的是,该功能可以和运动笔刷结合使用:
也就是先让一幅画的局部动起来,然后再像导演拍大片一样移动镜头让画面整体以不同的幅度动起来。
下面展示的是以4种不同幅度让镜头左移的效果:
最后就是图像生成质量更好了。
好在哪里?答案是更高的分辨率、更高的一致性以及保真度。
感兴趣的家人赶快去试试吧。
参考链接: [1]https://research.runwayml.com/more-control-fidelity-and-expressibility [2]https://twitter.com/runwayml/status/1726602429909860395
— 完 —