重磅新闻:阿里开源Wan2.2!电影级AI视频模型,5秒让普通人变身“张艺谋” 。人人皆导演的时代,可能,真的来了!
阿里AI这次真的杀疯了!
阿里通义万相开源 Wan2.2,全球首个搭载 MoE架构(混合专家) 的视频生成模型。
- 模型开源地址: GitHub:github.com/Wan-Video/Wan2.2 HuggingFace:huggingface.co/Wan-AI
- 如果你想直接使用,也可以直接上 wan video 的官网。在线试用:wan.video/generate
(官方的提示词构图&运镜提示词整理在文末,供大家参考)
这次开源了三个模型:14B文生视频模型、14B图生视频模型,和一个5B的同时支持文本/图像生成视频的可以在 4090 上跑的模型!
总参数27B,但每次推理仅激活14B,这意味着什么?省电50%的同时还能输出电影质感!
输入关键词文字,秒变大片的视频内容。
Wan2.2这次的开源,意味着普通人用低算力、低成本,也能快速产出电影美学镜头——从此拍视频如发朋友圈般简单。
正如网友们所言:“AI导演不抢盒饭,只帮你圆梦奥斯卡!”
附:提示词构图&运镜提示词(部分生成视频示例在上面的视频号视频中)
提示词1:在高空飞行的喷气式飞机机翼上,一位身着红白体操服的选手正以猫式行走姿态缓慢前进,强风将她的发丝与衣摆向后扬起。突然,她猛地腾空,完成一个凌空侧手翻,稳稳落在金属机翼边缘。紧接着,她在呼啸的气流中连做两个侧空翻接转体,手臂像风车般在风中挥出极限的弧线。最后,她以单脚点地稳住身形,指尖轻触机翼边缘,在轰鸣的引擎声中完成这不可能的一刻。远景镜头拉远,整架飞机穿越层云,仿佛整个世界都为她的专注与平衡屏住呼吸。
提示词2:一个宇航员在火星红色荒原上独自奔跑,脚下扬起细尘,动作因低重力而带有弹跳感。镜头贴地后跟,远处风尘柱缓缓升起。阳光斜照,头盔倒映着两颗升起的火星卫星。每一步都仿佛要飞离地面。镜头最后透过黑色面罩特写宇航员惊慌的脸。
提示词3:黄昏,剪影,混合色调,全景,定场镜头。视频从高空俯拍开始,镜头缓缓靠近一根横跨鳄鱼潭的独木。数十只鳄鱼潜伏水中,鳞甲闪着冷光。独木之上,一位身穿竞技体操服的少女以猫式行走姿态缓慢前进。周围是风声、水声与鳄鱼尾巴拍击水面的低响,空气紧张得仿佛凝固。突然,她腾空而起,下一秒倒立在独木上,动作精准无比,底下的鳄鱼瞬间拍打水面,张开嘴。随着最后平衡的恢复,镜头缓慢上升,俯瞰她伫立在细细独木上的身影与暗流涌动的鳄鱼潭。
提示词4:在土卫六的一片结冰湖面上,一只在滑滑板的橘猫在橙色浓雾中刻画出优美弧线。冰层轻响,滑行时溅起甲烷霜雾。镜头紧贴冰面滑行,跟踪长长的滑痕。滑板小猫缓慢旋转,尾迹微光闪烁。远方天际中透着模糊的土星光环轮廓,一艘巨大的飞船在陨落。
提示词5:巨龟
- 巨物主体: 远古玄武岩巨龟,体型如连绵山脉,龟壳上覆盖着森林与瀑布,皮肤是布满沟壑的岩石。
- 尺度参照物: 一架正在飞行的波音747客机,在巨龟面前显得如同蚊蚋。
- 场景: 晨曦时分的云海之上,阳光穿透云层。
- 运动与交互: 巨龟极其缓慢地转动它的头部,布满智慧的巨大眼睑缓缓睁开,瞳孔如同一座深湖。客机从它眼前平稳飞过,在瞳孔中留下小小的倒影。巨龟呼出的气息形成了可见的气流,让飞机周围的云雾产生了轻微的扰动。
- 美学控制: 史诗感,航拍长镜头,焦点从飞机转移到巨龟的眼睛,4K电影画质,突出巨大的尺度感和神圣感。
- 风格化: 奇幻史诗,自然纪录片质感。
提示词6:克苏鲁
- 巨物主体: 一只像海底山脉一样巨大的、布满藤壶和古老珊瑚的克苏鲁风格章鱼状巨兽,正处于沉睡状态。
- 尺度参照物: 一艘小小的“蛟龙号”风格的深海科研潜艇。
- 场景:马里亚纳海沟的绝对黑暗之中,周围有发光的水母和海洋雪。
- 运动与交互: 潜艇的探照灯光柱缓缓扫过一片看似是山脉的区域,光柱最终停在一处巨大的、紧闭的眼睑上。随着潜艇的靠近,眼睑下的肌肉轻微抽动了一下,搅动的水流让潜艇剧烈摇晃,扬起了海底的尘埃。
- 美学控制: 体积光,悬浮粒子,强烈的明暗对比,通过参照物的摇晃来体现巨物的力量,营造令人窒息的压迫感和深海恐惧。
- 风格化: 克苏鲁神话,科幻惊悚,深海纪录片。
提示词7:沙滩机器人
- 巨物主体: 一具倒在沙漠中的巨大战争机器人(高达风格)的残骸,锈迹斑斑,身上长出了植物。
- 尺度参照物: 一位穿着防护服、背着工具包的废土拾荒者。
- 场景: 后末日时代的广袤沙漠,天空中挂着两个太阳。
- 运动与交互: 拾荒者用绳索固定好自己,在机器人巨大的头部(如同一座小山)外壳上行走。他用切割枪切下一块装甲,火花四溅。镜头从拾荒者的特写,缓缓穿过机器人空洞的眼眶,展现其体内复杂的、已经熄灭的机械结构。
- 美学控制: 废土美学,强烈的日光和阴影,金属的锈蚀质感,镜头光晕,广角镜头展现荒凉感。
- 风格化: 科幻废土,《沙丘》或《疯狂的麦克斯》风格。
提示词8:沙人
- 主体与描述: 一个由沙尘和破碎玻璃组成的半透明人形巨灵,在城市中心由龙卷风汇聚成型。
- 场景与描述: 黄昏时分的迪拜或上海,背景是林立的未来派摩天大楼。天空是沙尘暴来临前的橙黄色。
- 运动与描述: 巨灵从地面盘旋而起,身体周围环绕着狂风和闪电。它伸出一只巨大的手,缓慢地抚过一座摩天大楼的玻璃幕墙,幕墙像水面一样泛起涟漪,但并未破碎。
- 美学控制: 动态粒子系统(沙、玻璃碎片),低角度仰拍强调压迫感,手持镜头的轻微晃动,冷暖色调对比,反射和折射效果。
- 风格化: 现代奇幻,灾难片,视觉特效大片。
提示词9:深海巨物
- 场景描述: 一架小型深海潜水器正在探索马里亚纳海沟的未知区域,探照灯是唯一的光源。突然,灯光照亮了一片巨大、光滑、如同黑曜石的曲面。这个曲面缓缓眨动,原来是一只巨型未知生物的眼睛。这次眨眼掀起了强烈的海底暗流,将潜水器猛地掀飞出去。
- 运动幅度: 潜水器的漂浮与探索、巨型眼睑的缓慢开合、被暗流猛烈冲击的失控翻滚。
- 美学控制: 水下摄影,幽闭恐怖氛围,仅有来自潜水器的实用光,生物发光细节,悬浮的深海雪,强调黑暗与未知的压迫感。