冬季白癜风 http://www.zherpaint.com/bzlf/hzxd/m/400.htmlRunway的Gen-1还没体验完,Gen-2(文字生成视频模型)就以迅雷不及掩耳之势发布了。而且就在最近,一个好消息突然袭来——Gen2可以免费试用了!并且这次的效果更加炸裂(自然美景、宇宙奇观、微观细胞等高清视频),AI大导离淘汰人类,又近了一步。
宣传词——「sayit,seeit」,只要你说得出来,它就能给你做出来。科幻小说里的超能力成真了!
可以说,有了RunwayGen-2,你就能用任意的图像、视频或文本,生成一段酷炫大片,想要啥风格,就有啥风格。
例如只需简单输入“丛林(Jungle)”,大片镜头便可立刻呈现:
一句话,一张图,三秒视频无中生有
此前,Runway在文本到图像领域就曾经大放异彩,大名鼎鼎的StableDiffusion,就是Runway开发的。在今年2月,Runway就提出了首个AI编辑模型Gen-1。以及最近的AI视频编辑工具Gen2。
顾名思义,Gen-2可以在原视频的基础上,编辑出咱们想要的视频。无论是粗糙的3D动画,还是用手机拍出来的摇摇晃晃的视频。
例如我们给Gen2投喂了一句中文:上海外滩夜景,影视风格。
十几秒后,一个航拍视角的视频片段便立即被做了出来。
如果想让视频的风格变换一下,也可以上传一张图片,例如我们用的是长沙橘子洲夜景照片。
Gen-2是一种高级的图形处理技术,它能够处理各种不同类型的影像素材,不论是动画还是电影,都能够轻松地处理。无论是宫崎骏风格的日系动画,还是写实风格的镜头特写,Gen-2都能够呈现出最真实的画面效果,使得观众们能够更加深入地感受到影片所传达的情感和故事情节。
宫崎骏风格的日系动画风格
写实风格的镜头特写
魔幻特效的电影大片风格
体验Gen2
网页端和移动端(仅限iOS系统)现在均可正式开始体验。
以网页端为例,进入Runway官方主页,点击上方“TRYNOW”并注册账号,就可以进入下面的界面:
点击右方的“IntroducingGen2”,我们就可以正式开玩了。
首先,输入提示词,最多个字符,然后在左边的设置菜单里进行一些基础配置(包括种子参数、插值等),点击“Generate”。
请注意,免费试用的总时长为秒(可在右上角查看剩余时长),每个视频的时长为4秒,因此您大约可以免费生成26个Gen2视频。
如果你的使用额度已经用完,或者你想要体验去除水印、提升分辨率等其他额外功能,那么你需要购买会员资格。标准版每月收费15美元,Pro版则需要35美元,年付选项更加优惠。
Gen-2的八大「魔法」
Mode01:TexttoVideo(文字生成视频)
一个文本提示,就能合成出任意风格的视频,不怕它生不出来,只怕你想不到。
例如:在寂静的城市的一间阁楼里,傍晚的阳光透过窗户温柔地洒进屋内。
Mode02:Text+ImagetoVideo(文字+图像生成视频)
一幅图,再加一句prompt,直接就给你变成了视频。
例如:输入图像
夜晚城市街头的年轻中国男子和城市的光斑
prompt提示词:在一个低角度拍摄的画面中,男子正沿着街道行走,周围酒吧的霓虹灯照亮了他的身影。
Mode03:ImagetoVideo(图像生成视频)
给它一张图片,它给你秒变一段视频。多种风格,随你选择。
例如:输入一张你在城市海边散步的图像
斯维特格罗斯克度假城Svetlogorskresortcity
十几秒后,美图就变成了电影
Mode04:Stylization(风格化)
如果你拥有一段原始视频,但效果不够惊艳,该怎么办?
只需将你想要添加的图像或文字叠加到视频上,即可立即生成多种神奇效果,使其瞬间变成好莱坞大片。
Mode05:Storyboard(故事版)
将模拟的场景一拉,即可自动转换为具有风格化和动画效果的渲染图。
Mode06:Mask(蒙版)
在你的视频中分离出特定的对象,然后通过prompt,想怎么改就怎么改
例如:你想给你家的二狗子加点料。
prompt提示词:一只身上有黑色斑点的白毛狗。
Mode07:Render(渲染)
只需提供图像或提示,即可将无纹理渲染转化为逼真的输出,其深度和真实感令人印象深刻。
例如:给一个模型增加实际场景应用。
prompt提示词:探索海底世界
Mode08:Customization(定制)
通过定制,让原始视频焕发个性化魅力,同时保持高度还原度。
例如:外国小哥秒变海龟人
Gen-2的前景十分令人着迷,从生成的结果来看。
尽管Meta和谷歌也推出了类似的文本到视频模型(Make-a-Video和Phenaki),生成的剪辑更长、连贯性更好。
然而,与这些规模更大的公司相比,Runway团队只有45名成员,却仍然投入了大量的资源进行研究。
实际上,自年以来,Runway一直专注于研发AI工具,并在去年年底筹集了万美元。
有趣的是,初始版本的StableDiffusion也得益于Runway的贡献,随后被StabilityAI推广并进一步发展。
这表明初创公司在生成式AI方面拥有惊人的潜力。
有兴趣的朋友可以体验