火遍小红书的 AI 视频神器,这次整出的新活又让
AI 视频的多主体分歧性,素来是个困难。让 AI 凭空天生模特跟衣服不难,但假如甲方请求,必需要让马斯克代言,穿上毛绒年夜衣,AI 可能就办不到了。Pika 近来更新的 2.0 模子,提出了一种很风趣的处理方法——咱们上传多张图片,Pika 会精准参考图片中的元素,天生视频。集齐人物、商品、场景的照片,一个十分基本的告白片就出炉了,并且这些素材在视频里长得都跟照片里一样。这能否象征着,AI 视频的分歧性困难处理了,告白行业的友人们又要焦急了?实在并不,经由实测,Pika 的可玩性很高,但论适用,道行还不敷。马斯克跟奥特曼看片子,名画吃薯条,同框从未如斯简略Pika 上传多张参考图片的功效,叫作「Scene Ingredients」(场景身分)。应用起来很简略:1.点击「+」上传图片,下限 6 张;2.在文本框里,写上简略的提醒词。接上去就进入实操——让闹得生灵涂炭的马斯克跟奥特曼,化兵戈为财宝,在一同看片子。▲提醒词:两团体坐在黝黑的不雅众席中。他们手捧一桶爆米花,一把放到嘴里嚼着,聚精会神地看着面前的场景。他们睁年夜眼睛的心情转达出热切的等待或入神,好像他们完整沉迷在正在开展的戏剧或场景中。四周的情况标明人群拥堵,但核心依然会合在他们的反映上上传两位的照片就够了,不雅众席能够用提醒词写出来。对马斯克,AI 的施展很稳固。但奥特曼看起来是田主家的傻儿子,吃相可怕就不说了,眼睛年夜得要失落出来。Pika 很风趣的一点是,素材能够「复用」。以是,咱们能够让马斯克跟奥特曼过把模特瘾。只上传一张打扮图片,而后经由过程提醒词,让他们衣着一样的绿色年夜衣,拍个时髦年夜片。▲提醒词:两名女子在绚丽的冬日景致中站在一同自拍。两人都衣着雷同的绿色长外衣。满身照,重新到脚展示他们。他们摆出专业模特般的姿态,脸上挂着自负的浅笑。片子灯光凸起了他们的脸庞跟外衣的豪华质感。高端时髦拍照作风,专业相机品德,时髦杂志美学两人的照片都找了现成的,绿色的年夜衣跟雪窖冰天的配景是别的用 AI 天生的,衣服上的「AIGC」,算是磨练 Pika 的附加题。成果,场景跟年夜衣的分歧性坚持得不错,「AIGC」的字样依稀能够识别,两位模特的举措也遵守了提醒词。但最年夜的成绩是,这两人是谁?视频的人脸跟照片,不克不及说截然不同,能够说是绝不相关。不信邪,持续让 Pika 玩换装。此次,咱们请出扎克伯格,按例先用 AI 图片东西天生衣服,下面写着「I was human」(我曾是人类),响应经典的呆板人梗。而后,再找一张扎克伯格的图片,跟一把尤克里里的图片,让小扎玩个音乐。▲提醒词:一位身穿玄色 T 恤的女子站在温馨的房间里,弹奏着尤克里里琴。镜头从中前景开端,展示他的全部身材,逐步拉近,最后聚焦在 T 恤上的笔迹上Pika 对提醒词的遵守跟镜头的活动都挺好,衣服也丝滑地穿上了,但右手,尤其年夜拇指,仍是不完善。相较 Google Veo、OpenAI Sora 等,Pika 的模子才能不算顶尖,一个成绩处理了,另有更多的 bug 被发明。实验了写实的,再来尝尝二次元画风,为了让坂田银时跟漩涡鸣人同框,我特地筛选了两张配景都是蓝天白云的图片。▲提醒词:动漫作风的场景,镜头聚焦在两个年青女子的脸上,配景是湛蓝的天空跟白云。他们一边谈天一边眼神交换,保存了原有的动漫艺术作风配景融会得很天然,两位正面的心情施展不错,吹动头发跟衣服的风也恰如其分。但是,回身切实太恐怖了。银时是逝世鱼眼,不是真的翻白眼啊喂。次元壁都攻破了,固然也能够让名画跨年月互动——蒙娜丽莎跟戴珍珠耳饰的�女在麦当劳餐厅吃薯条。▲ 提醒词:蒙娜丽莎跟戴珍珠耳饰的�女正在麦当劳餐厅用餐。她们绝对而坐,桌上摆着薯条。她们边谈天边品味薯条,摄像机从正面捕获她们,两位脚色偶然看向镜头,营建出一种随便而友爱的气氛后果一言难尽,看到蒙娜丽莎,不晓得达芬奇想不想掀棺材板。两位似乎贴图一样,被放在了视频里,头部也活动得十分诡异。偶然候,回归简略,道法天然,成果反而超越预期。▲提醒词:特写镜头,水池名义呈现气泡,而后咖啡杯从水中浮出上传一张星巴克的图片,一幅莫奈的睡莲,就能够失掉一个「净水出芙蓉」的咖啡杯。PK 国产模子,把持 AI 视频的门槛更低了必定水平上,Pika 进步了视频的可控性。话不说满,由于从实际看来,Pika 在场景、打扮、物品上的分歧性坚持地较好,人物的脸轻易崩,不论是什么次元。同时,模子的基本才能,Pika 也有待提高,吃货色、奏琴等物体活动,依然会呈现成绩。这些成绩,能不克不及经由过程抽卡缓解呢?三个字:抽不起。Pika 2.0 现在仅对 Pro 跟 Fancy 用户开放,假如按月订阅,每月至少花 35 美元,连收费试用的额度都不。并且,Pro 用户每月只有 2000 积分,但应用 Scene Ingredients 功效,一个视频就要花失落 100 积分。▲vidu 界面实在,国产 AI 视频模子 Vidu,比 Pika 更早地实现了「多图参考」的功效。更拿捏用户的是,它有收费休会的积分。Pika 的多少个案例,我也在 Vidu 跑了一下。蒙娜丽莎跟戴珍珠耳饰的�女吃薯条,两位像刚出土,但蒙娜丽莎的复原度比 Pika 高。马斯克跟奥特曼一同看片子,马斯克的脸像了七八成,奥特曼的脸仍旧灾害。坂田银时跟漩涡鸣人同框,Vidu 竟然能基于正脸天生侧脸,但画风跟原图不太一样。别的,在功效上,Vidu 有一点不如 Pika——最多只能上传三张图片。以是,让 Vidu 给马斯克跟奥特曼拍时髦年夜片,我就不上传配景,只上传了两位的照片跟绿色的年夜衣。两位给人的感到很生疏。能够看出,人脸的稳固性,依然是个困难。跟 Pika 比拟,Vidu 后果怎样,能够见仁见智。Pika 用的是 Pro 版,Vidu 用的是收费版,客不雅上也会招致两者的差别。但 Pika 跟 Vidu 的思绪是类似的——仅靠多少个图片素材、一段简略的提醒词,就天生绝对稳固的物体。在 AI 视频天生中,坚持主体分歧性,现在绝对牢靠的是 LoRA 计划,用必定数目的、特定主体的素材,对模子停止微调。经由过程适量的素材跟练习,模子能逐步控制这个脚色的样貌特点。但为了让 AI 视频被更多人用起来,有更辽阔的贸易代价,门槛就要下降。至少,从 Vidu 跟 Pika 身上,咱们看到了可能性。靠 AI 短视频出圈,在整活的途径上一去不复返Pika 的 2.0 模子发了没多少天,海内网友曾经玩疯了。拿本人的照片,重复天生差别场景的视频,就能够实现「瞬息全宇宙」。▲ 图片来自:X@EladRichardson经由过程 AI 一键试衣,模特跟衣服如流水,场景都不带换的,实拍的钱省上去了。▲ 图片来自:X@martgent玩着玩着,Pika 给了我一种玩「QQ 秀」跟模仿人生的感到,怎样装扮视频里的脚色,咱们来决议。假如让马斯克「圆梦」,很轻易,先用其余 AI 东西,天生了一件「占据火星」的 T 恤、一个写着「MAGA」的白色帽子。而后,把这些图片、火星的场景、马斯克的照片,以及他的擎天柱人形呆板人、他特殊爱好的网红心情包 Doge 原型,全体上传到 Pika。▲提醒词:一名女子站在火星名义,身穿玄色T恤,头戴白色帽子。他的右边坐着一只狗,左边站着一个呆板人。镜头以广角镜头开端,捕获女子、狗、呆板人的满身。跟着镜头安稳拉近,女子朝镜头欢乐地挥手,心情弥漫着高兴跟冒险精力终极,一个阳光豁达年夜男孩呈现,左牵黄,右擎苍,浑厚不足,但就是不像马斯克。像不像是一回事,只有思绪宽阔,弄法无限无尽。基于咱们本人跟名流的照片,能够无痛追星。上传帽子、衣服、乐器,能把本人重新装扮到脚。集齐场景、产物、模特,一个 5 毛殊效的告白电影就有了……照片+AI 图片+Pika 2.0+提醒词,能够天生良多好玩的画面。同时,如许的天生方法也躲避了一些视频模子的短板,比方写字,在图片模子就能够处理。和睦 Google 硬刚模子才能,和睦 Runway 这种逐梦好莱坞的敌手比拟,Pika 有本人的弯道超车弄法。实在始终以来,Pika 在整活跟创意方面就是一把妙手,之前的一系列 AI 殊效功效 Pikaffect 全网爆火,刷屏小红书跟 TikTok,推进 Pika 用户冲破 1100 万。▲ AI 捏捏. 图片来自:Pika▲AI 切蛋糕. 图片来自:PikaPika 切中了一群对整活短视频有高需要的用户,哪怕这些视频是模板化的,昙花一现的,但只有风趣,人们就会簇拥而至。谁说赢者通吃才是成功?AI 的市场是辽阔的,模仿物理天下诚然是个弘远的幻想,先实现让 AI 短视频风趣起来的小目的,未尝不是一种胜利的方法。
申明:新浪网独家稿件,未经受权制止转载。 -->
上一篇:每日论金| 关注2600美元支撑力度
下一篇:没有了
下一篇:没有了