网易首页 > 网易号 > 正文 申请入驻

全国首个上手机的AI视频通话来了!《黑神话:悟空》经文也能破译

0
分享至

金磊 明敏 发自 凹非寺
量子位 | 公众号 QbitAI

免费的AI视频通话功能,就这么水灵灵地来了。

之前B站Up主“女流姐”在直播《黑神话:悟空》的时候,科普游戏内的经文被大家津津乐道。

那么这个可以打视频通话的AI,是否也能帮玩家破译经文呢?

我们这就实测了一波:



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

这个AI在看完经文后,表示大致意思是:

佛陀在菩提树下教导弟子如何修行和获得无上的智慧。

而清华毕业的“女流姐”在直播中给出的解释也是“世尊在启示众人”。

这一波,AI算是把博大精深的经文给解释到位了。

那么对于这款游戏,AI又了解多少呢?我们给它看了下开场大片并提问:



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

嗯,这个AI准确地认出了孙悟空和游戏的名字。



这便是智谱AI最新推出的类GPT-4o视频通话的功能——让AI边看世界边和你聊天

而且已经在自家App智谱清言里上线了,是全国首个正式开放的那种(一部分人先用起来,再逐步完全开放)。



AI视频通话,还能用来干啥?

首先,AI视频通话的入口,就在首页底部输入框右侧的电话按钮



进入通话界面,再点击视频按钮,就可以开启视频通话的模式了:



现在,是时候打开新世界的大门了!

它能直接辅导小孩做作业。不仅能直接看到、看懂题目,还会循循善诱,一步步引导小孩自己思考找到正确答案。



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

轻松拿捏英语翻译,甚至是专业论文。



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

当然还能变成日常生活助手,比如让它帮忙看下食品是否过期。



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

还能陪人闲聊,情绪价值拉满。



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

而且可以随时打断它的话,不用固定一来一回,就像和人聊天那样。

(聊天过程也主打一个“啊对对对,你们人类说的都对”)



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

同时也能和人互动,可以准确找到手指指到的地方。



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

总结来说,新增的AI视频通话能力,让智谱清言不用仅仅依赖打字、语音这种人类主动输入的形式了解世界,只要打开摄像头,咱们看到的画面,AI也能了解。

这样一来,AI的能力立马提升了一个维度。具备跨文本、音频、视频实时推理能力后,AI也在交互上变得更加灵活、亲切。

基座大模型也升级了

除了这次AI视频通话功能之外,智谱AI在大模型技术上也一波大更新——

推出新一代基座大模型GLM-4-Plus

而且是敢在KDD国际数据挖掘与知识发现大会上发布的那种。今年以来,智谱以“国产之光”的形象频繁在ICLR等国际舞台上露脸亮相,向外展示中国大模型当下最前沿进展。

首先,在语言文本能力方面,GLM-4-Plus已经取得与GPT4o及405B参数量的Llama3.1相当的成绩。



大模型长文本能力也随着此次的更新得到了加强:



图像和视频理解能力方面,GLM-4-Plus也取得了较为突出的成绩;而且还是可以理解网页内容,并将其转换为HTML代码的那种。



即使是面对复杂的视频内容,GLM-4V-Plus也能轻松hold住。

据了解,该模型将上线开放平台(bigmodel.cn),智谱AI还将提供国内首个通用视频理解模型的API!



以下面这个视频为例:



视频地址:https://mp.weixin.qq.com/s/rq7easE8aZss5QgduZutHg

GLM-4V-Plus在看完视频之后,便可以对其内容做理解并回答用户的问题。

用户:这个穿绿色衣服的球员在整个视频都做了什么?

GLM-4V-Plus:在整个视频中,穿绿色衣服的球员在场上运球,然后跳起将球投入篮筐。

用户:这个视频的精彩时刻是什么?发生在第几秒?

GLM-4V-Plus:这个视频的精彩时刻发生在第4秒,当时穿绿色衣服的球员跳起并将球投入篮筐。

由此,也就不难理解智谱清言上的AI视频通话功能为什么可以做到如此丝滑了。

智谱AI,又先迈了一步

今年以来,智谱的大动作不断。

不仅仅是这次上线的AI视频通话是全国首个,更早之前的每一个“大动作”也都是属于领先的梯队。

比如年初发布的新一代基座模型GLM-4,全面对标GPT-4;7月发布的类Sora视频生成模型CogVideoX;以及文生图模型迎来最新版本CogView-3-Plus,其效果接近目前最佳的MJ-V6及FLUX等模型,并支持图片编辑功能。



全面对标OpenAI,不是说说而已。

更关键的是,发布即开放,这很智谱。

智谱清影上线即可免费体验。底层模型同样开放。

也是在这两天,智谱AI的CogVideoX-5B宣布开源。它能在低门槛条件下带来更好的视频生成效果。



为开源社区提供了更丰富选择。



与此同时,GLM-4-Flash也已经做到了完全免费。

由此可见,智谱AI在让大模型变得亲民这条路上是认真的。

毕竟AIGC应用,好用、易用才是硬道理;得用户者得天下。

那么你觉得智谱AI的视频通话功能如何呢?欢迎体验过后在评论区留言讨论哦~

p.s.目前只是Beta版本,近期还会有更大版本迭代~

参考链接:
[1]https://www.bilibili.com/video/BV1p2421Z7f1/?vd_source=2cbb36f222ba4fbcf9054d7042914889
[2]https://www.bilibili.com/video/BV1giWHewELY/?spm_id_from=333.337.search-card.all.click&vd_source=1da63cf85df97568b93eb5f22aae3fa3

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2名女子穿内衣内裤游泳,被小男孩趁机揩油,关键不能对他怎么样

2名女子穿内衣内裤游泳,被小男孩趁机揩油,关键不能对他怎么样

唐小糖说情感
2024-09-05 11:50:34
当着100多个国家面,中国军方警告美国!美媒很不高兴:中国怎敢

当着100多个国家面,中国军方警告美国!美媒很不高兴:中国怎敢

影孖看世界
2024-09-13 14:50:42
最大灯港姐,被人赵完松!

最大灯港姐,被人赵完松!

廉江廉江
2024-09-14 10:38:06
徐鸿,本人提出辞去第十四届全国人民代表大会代表职务

徐鸿,本人提出辞去第十四届全国人民代表大会代表职务

新京报
2024-09-14 10:46:21
张本美和父亲怒斥王曼昱,不配做球星!对我16岁的女儿发球回抛

张本美和父亲怒斥王曼昱,不配做球星!对我16岁的女儿发球回抛

二疯说球
2024-08-13 11:41:40
vivo X200 正式公布,这次可能要干翻 iPhone 16

vivo X200 正式公布,这次可能要干翻 iPhone 16

刘奔跑
2024-09-13 23:16:21
翁帆离婚,一语惊人!杨振宁万万没想到,翁帆的内心会如此执着

翁帆离婚,一语惊人!杨振宁万万没想到,翁帆的内心会如此执着

陈二建
2024-09-06 17:25:29
马科斯被骗了?解放军增兵南海,中美等100国开会,新的格局成形

马科斯被骗了?解放军增兵南海,中美等100国开会,新的格局成形

青年的背包
2024-09-14 15:04:39
赢麻了!玩车研习社送灿龙18万的车,联合乔菲直播,狂飙兄弟首更

赢麻了!玩车研习社送灿龙18万的车,联合乔菲直播,狂飙兄弟首更

裕丰娱间说
2024-09-14 11:12:31
德国选举结果出人意料,外媒:欧洲恐要变天,一场大风暴或将来临

德国选举结果出人意料,外媒:欧洲恐要变天,一场大风暴或将来临

小lu侃侃而谈
2024-09-13 21:24:39
北京:就业困难人员的认定来了

北京:就业困难人员的认定来了

童童聊娱乐啊
2024-09-14 09:12:25
全球最赚钱成人网站,1年赚66亿美元,奥运冠军都在搞擦边

全球最赚钱成人网站,1年赚66亿美元,奥运冠军都在搞擦边

科技每日推送
2024-09-13 12:56:22
卖队内情曝光!夺冠后绿军老板父子因潜在巨额损失出现内讧

卖队内情曝光!夺冠后绿军老板父子因潜在巨额损失出现内讧

直播吧
2024-09-14 16:16:44
既要面子又认怂!德国战舰穿越台海海峡时,出现奇葩操作

既要面子又认怂!德国战舰穿越台海海峡时,出现奇葩操作

娱乐喵喵说
2024-09-14 11:20:32
女子拒绝丈夫频繁同房,2011年丈夫烧铁块往她身上烙,开水嘴里灌

女子拒绝丈夫频繁同房,2011年丈夫烧铁块往她身上烙,开水嘴里灌

汉史趣闻
2024-09-13 08:47:04
最新民调:哈里斯支持率领先特朗普5个百分点!约52%人认为特朗普搞砸辩论 ,反应不敏锐

最新民调:哈里斯支持率领先特朗普5个百分点!约52%人认为特朗普搞砸辩论 ,反应不敏锐

每日经济新闻
2024-09-13 15:43:56
《黑神话》四妹动捕演员化妆前后对比:判若两人!

《黑神话》四妹动捕演员化妆前后对比:判若两人!

游民星空
2024-09-11 18:05:22
大利空突袭,节后大A恐怕要更糟心了,2635点能守住吗

大利空突袭,节后大A恐怕要更糟心了,2635点能守住吗

风风顺
2024-09-14 12:45:32
不像吹牛,俄副防长一句话引爆香山论坛,西方担心两年的事发生了

不像吹牛,俄副防长一句话引爆香山论坛,西方担心两年的事发生了

千里持剑
2024-09-14 13:18:53
俄军给中国总结的三大教训:别迷信导弹,别小瞧美国,别心慈手软

俄军给中国总结的三大教训:别迷信导弹,别小瞧美国,别心慈手软

盒子里的密探
2024-09-13 17:02:20
2024-09-14 16:36:49
量子位
量子位
追踪人工智能动态
9955文章数 175517关注度
往期回顾 全部

科技要闻

华为三折叠,炸出570万"黄牛"

头条要闻

领导要求下属每天带饭带水但不给钱 下属拒绝后被辞退

头条要闻

领导要求下属每天带饭带水但不给钱 下属拒绝后被辞退

体育要闻

男篮这俩18岁黑小伙,可真别吹了……

娱乐要闻

陆虎陈曌旭婚礼现场照 中式婚服太唯美

财经要闻

前8月消费品零售总额增3.4% 失业率5.2%

汽车要闻

再上昆仑 全新福特探险者上市 售30.98万元起

态度原创

房产
教育
时尚
数码
亲子

房产要闻

最新!南沙全面放开限购,不限社保与套数!

教育要闻

新学期和“三大科目”成为兄弟

叮咚!一年一度的大牌月饼开箱来了

数码要闻

微星“MPG 341CQPX”34 英寸带鱼屏曲面显示器国行开售,4999 元

亲子要闻

宝贝炫饭!

无障碍浏览 进入关怀版