网易首页 > 网易号 > 正文 申请入驻

Vidu1.5 新功能来袭:多主体一致性或让 3D 渲染成为历史?

0
分享至


本文授权转自:数字生命卡兹克(ID:Rockhazix)

在X上看到一个很酷的2D动漫AI视频。

我直接放一下,强烈建议看完。

当时第一遍看的时候,不知道为什么,心里的二次元之火熊熊燃烧。

我也一直都是那个,热爱纸片人的少年。

片子在动漫画风的稳定性上,强的可怕。

这个作者,是一个非常喜欢做AI视频,而且是动漫风格AI视频的创作者,叫Naegiko。


虽然片子只有10万播放,但是,很多大号都直接转载他的,总播放量破百万肯定是有的了。

这个AI视频的工具,来自Vidu。

在评论区的下面,哥们也在给所有喜欢做动漫风格的人,安利Vidu。



又是Vidu。

其实很多人上周也在催我写Vidu1.5版本的更新,但是事情实在太多,本来上周五打算发,结果出了点小毛病一波直接干到医院,一拖也就拖到了今天。

其实坦率的讲,现在的视频大模型,在写实上效果都能卷的还不错,但是在一些风格化的动漫视频上,经常会出现一些变形和识别错误。

甚至有的还会把你给的动漫的参考图,直接给你在过程中变成写实或者那种3D风格的,稳定性很差。

而对于Vidu来说,在我测试的这几个月里,Vidu的2D风格,就是现在最强的,也是他们之前,最大的特色。

但是Vidu1.5的这波更新,如果只是模型质量提高了一些,语义理解强了一些,其实坦率的讲也没什么好写的了,大家对AI视频模型的更新已经有点趋近于去年语言大模型的感觉了,已经有点免疫了。

需要一些更直观的功能,才能让大家感觉到,很酷的感觉。

而Vidu1.5版本这次的更新,刚好就有一个我觉得划时代的新功能,叫:

多主体一致性。

我先放两个视频,让大家先直观感受一下,这个东西是个啥。


衣服是梅西的10号球服,转过身来,是宋小宝,然后振臂高呼。


来自朋友 @卡尔之 前做的一个case,马斯克和甄嬛漫步在故宫中,还动态非常大的给屏幕面前比了个大拇指。

现在应该能模糊的感觉到了一些,来自多主体一致性的强大了吧?

用最简单的话解释,就是你可以传至多3张图。来实现任意人物、任意物品、任意场景的一致性。

比如梅西那个case,就是上传了梅西的球服+宋小宝的脸,然后用一段Prompt: 梅西背对着镜头,慢慢转过头是图中的男子在冲着镜头笑。 直接生成的。


而马斯克和甄嬛,则是上传了一张马斯克的、一张甄嬛的、一张故宫的图。然后用一段Promtp:一个穿着黑色衣服裤子的男人和一个穿着黄色中国古代服装的女人走在宫殿外的路上。


就出来了完美一致的视频。

这就是Vidu1.5这波更新、最酷的功能,多主体一致性。

在我看来,可能是现在很多人意识不到,但是在AI视频领域,可能划时代的一个技术。

我们常说AI视频想进入专业影视领域,除了最终质量之外,一直以来都有三个一致性要解决:

风格一致性、角色一致性、场景一致性。

如果连在单个片段里,这三个一致性都没法解决的话,那别提电影这种最高殿堂的产物了,连一些剧集都够呛。

而过往,风格一致性已经解决的还行了,角色一致性Vidu在今年7月份的更新中其实上了一版,而场景一致性,一直以来几乎没有任何解决方案。

这一波,Vidu1.5直接用最简单开箱即用的方式。

解决了所有单片段中的一致性。

很强,非常强。

你终于可以不用担心,你的广告、你的片子中,人物角色形象不一致的问题了,也不用去用那个蹩脚的Midjourney出图再图生视频的流程了,而是直接找到你想要的,扔进去,加一段prompt,完事。

这个影响,可能非常深远,更是一道,黎明的曙光。

Vidu网址在此:www.vidu.studio

进去登录以后,就能看到这个参考生视频了,打开那个多主体一致性功能,你就可以传最多三张图片作为参考。


比如,我们传一个奶龙和一个鸡哥上去,让他两,来一波开心的跳跃。


Vidu1.5的速度也非常的快,我选的720P,不到1分钟,就跑出来了,速度上跟Runway是一个级别的了。


效果也是非常的魔性。

我能对着他两跳看一个小时。

鸡哥和奶龙,在主体上,几乎是跟我传上去的图片,一摸一样,完美的实现了一致性。

你可以用这三个图片格子,来自由组合,来实现任意人物、任意物品、任意场景的一致性。

这个事情非常的好玩。

比如上面奶龙和鸡哥的就是,人物正面+人物正面

你也可以传一张人物背面+人物正面。

比如还是宋小宝。


人物脸可以传两张,更强的保证人脸的一致性。

Prompt写:女生转过身发现脸是该男子。


对不起了宋小宝老师。。。。。

还可以是一个人物的三视图,直接实现3D人物级别的一致性,3张图,就可以直接跳过建模阶段直接出成片。

我随手拍了我非常喜欢的Dimoo,之前的熊猫款的三视图。然后扔到Vidu里。


然后不到1分钟,一段Dimoo在森林里的视频就做完了。


非常稳定,以后这种片子,谁还建模渲染啊。。。

你也可以,人物+物品。

比如一个女人喝一口可口可乐。


向伟大的AI致敬。

甚至,Vidu1.5的多主体一致性不仅对角色是一场革命,对电商广告也是。

直接物品+场景。

比如APPLE watch。


我让他在这个场景里面来个360度旋转。


这个多主体一致性,绝对是我最近见过,可能是AI视频领域,最有趣也是最有用的功能之一。

想起来很多年以前,罗子雄在TED上做的一个演讲。

讲的就是创意。

创意其实很多时候就是借鉴和组合的能力。

比如把这些元素,随机组合。


就会得到很多很多有的东西。

而Vidu1.5这个多主体一致性,其实也是组合,你可以不断的组合。

人物背面+人物正面、人物三视图、物体+场景、人物+场景、人物+物体等等等等。

太多了。

甚至你如果觉得三张图片不够用,还可以上传的时候,将多个主体拼接到一张图中上传,展开无限可能。

新的技术,总是能进一步推升我们的边界,让我们的想象力,终于可以更为宏远的延伸。

感谢Vidu,感谢这个多主体一致性。

我觉得,我又可以,继续造梦了。

国产的AI视频,也真的是越来越好了。

Vidu、可灵、海螺、即梦、pixverse,每一个都在市场上,杀出了自己的一条血路。

为你们,献上我最崇高的敬意。

以及,最好的祝愿。

文章转载:数字生命卡兹克,版权归原作者所有

原文链接:https://mp.weixin.qq.com/s/SlWiaBKK5Qw1hI_7D11TvA

版权声明:“IXDC”所推送的文章,除非确实无法确认,我们都会注明作者和来源,本公众号对转载、分享的内容、陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完善性提供任何明或暗示的保证,仅供读者参考。部分文章推送时未能与原作者取得联系,若涉及内容或作品等版权问题,烦请原作者联系我们,给出内容所在的网址并提供相关证明资料,我们会核查后立即更正或者删除有关内容!本公众号不承担任何责任,并拥有对此声明的最终解释权。

联系微信:18802086168

联系电话:18802086168

编排 | 巫 欢

终审 | 苏 菁

点这里,学习更多设计知识!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一载有171人波音客机滑出跑道险些冲进大海,距离海岸仅15米堪堪停住

一载有171人波音客机滑出跑道险些冲进大海,距离海岸仅15米堪堪停住

界面新闻
2024-12-20 21:50:26
不能低估思想“极左”的人散布的谎言所造成的恶劣影响

不能低估思想“极左”的人散布的谎言所造成的恶劣影响

笑熬浆糊111
2024-12-19 00:05:25
今日气温小反弹,明日冷空气再发威!

今日气温小反弹,明日冷空气再发威!

上海徐汇
2024-12-20 07:55:02
人死户销,社保局不会主动告诉你的这十笔钱养老金和医保:

人死户销,社保局不会主动告诉你的这十笔钱养老金和医保:

现代春秋
2024-10-11 17:07:09
第22场大会召开,普京赌上了国运,对华称呼已变,俄国组建新地区

第22场大会召开,普京赌上了国运,对华称呼已变,俄国组建新地区

通政司知事
2024-12-20 15:04:51
普京:特别军事行动形势正在发生巨大变化

普京:特别军事行动形势正在发生巨大变化

环球网资讯
2024-12-19 19:43:15
不建议买的羽绒服品牌,听着上档次,实际都是智商税!有点坑人

不建议买的羽绒服品牌,听着上档次,实际都是智商税!有点坑人

白宸侃片
2024-12-18 00:16:28
今日冬至,老话说“不怕冬至雨,最怕冬至晴”,晴天有啥预兆?

今日冬至,老话说“不怕冬至雨,最怕冬至晴”,晴天有啥预兆?

阿凫爱吐槽
2024-12-21 07:24:11
张兰不管大S哪一套,带网友看汪小菲俩孩子房间!网友发现大不同

张兰不管大S哪一套,带网友看汪小菲俩孩子房间!网友发现大不同

古今历史记
2024-12-21 11:34:01
巨婴界天花板熊丽:啃完三任丈夫啃94岁母亲,55岁从未上过一天班

巨婴界天花板熊丽:啃完三任丈夫啃94岁母亲,55岁从未上过一天班

星光历史
2024-12-21 10:14:21
乌克兰最强部队被歼灭,相当于国军的整编74师被消灭在孟良崮

乌克兰最强部队被歼灭,相当于国军的整编74师被消灭在孟良崮

桃源拾荒人
2024-11-27 19:31:34
好歹毒!知道为啥年轻人不愿跟老人同住吗?网友:别低估老人的恶

好歹毒!知道为啥年轻人不愿跟老人同住吗?网友:别低估老人的恶

娱乐洞察点点
2024-12-20 20:26:52
梁朝伟董洁往事还能瞒多久?爆两人房间满地成人用品!

梁朝伟董洁往事还能瞒多久?爆两人房间满地成人用品!

派大星纪录片
2024-12-16 17:52:45
鉴定问界M7事故机构被罚3万元,负责人回应:处罚原因与鉴定问界M7无关

鉴定问界M7事故机构被罚3万元,负责人回应:处罚原因与鉴定问界M7无关

红星资本局
2024-12-20 18:55:09
终于来了,世界上第一个冷冻人已解冻,50年过去,他还能复活吗?

终于来了,世界上第一个冷冻人已解冻,50年过去,他还能复活吗?

听风者说
2024-12-18 21:27:45
俄自研EUV光刻机曝光:11.2nm光源,每小时可处理60片12吋晶圆

俄自研EUV光刻机曝光:11.2nm光源,每小时可处理60片12吋晶圆

芯智讯
2024-12-20 14:16:16
韩娱惊爆丑闻!16人女团演唱会12人被塞电动玩具,财阀掌握遥控器

韩娱惊爆丑闻!16人女团演唱会12人被塞电动玩具,财阀掌握遥控器

南城无双
2024-12-20 01:12:33
非常罕见的一张马化腾年轻时候的照片,他没有戴眼镜,气场十足。

非常罕见的一张马化腾年轻时候的照片,他没有戴眼镜,气场十足。

人情皆文史
2024-11-20 02:58:36
又被李嘉诚说中了!中国手握两套房以上的家庭,未来只有3种结局

又被李嘉诚说中了!中国手握两套房以上的家庭,未来只有3种结局

室内设计师有料儿
2024-12-12 11:25:47
清北学生正面硬刚宋某,"患癌课题组"演讲全程被质疑.宋某海报被撕

清北学生正面硬刚宋某,"患癌课题组"演讲全程被质疑.宋某海报被撕

趣笔谈
2024-12-21 11:42:53
2024-12-21 15:52:49
美啊教育
美啊教育
创意设计与生活美学最佳平台
5386文章数 1546关注度
往期回顾 全部

科技要闻

OpenAI最强推理模型o3发布!但明年才能用

头条要闻

歌手韦唯回应"消失"10年:在泰国遇车祸整个脊柱断了

头条要闻

歌手韦唯回应"消失"10年:在泰国遇车祸整个脊柱断了

体育要闻

“他不再是那个数据刷子了”

娱乐要闻

刘诗诗带娃逛超市,疑隔空喊话吴奇隆引争议

财经要闻

国潮褪去,李宁掉队!

汽车要闻

预售37.98万 坦克500Hi4-Z将于1月1日上市

态度原创

房产
艺术
数码
本地
公开课

房产要闻

史无前例!14小时!狂抢1064轮,三亚诞生新地王,楼面价21191元/㎡

艺术要闻

故宫珍藏的墨迹《十七帖》,比拓本更精良,这才是地道的魏晋写法

数码要闻

追剧新“装备”:雷蛇推出《鱿鱼游戏》主题鼠标、鼠标垫和手机壳

本地新闻

好吃潮州|潮州腐乳饼,咸甜党都沦陷了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版