网易首页 > 网易号 > 正文 申请入驻

腾讯发布混元T1推理模型:独家创新架构擅长超长推理

0
分享至

腾讯最近真的猛,产品增长快不算,模型也库库发布
3D、视频和 LLM 在GitHub上总Star数都超过2.6万了
刚才发布了混元 T1 推理模型的正式版,推理速度极快(首字秒回)而且支持超常文本处理
模型基于混元Turbo S训练
而且这次的正式版比前段时间上线腾讯元宝的混元T1-preview在各项测试上都有大幅提升
混元T1已在腾讯云官网上线,输入价格为每百万tokens 1元,输出价格为每百万tokens 4元。
混元 Turbo S 这个模型也很有意思,采用Hybrid-Mamba-Transformer融合模式,应该是业界首次将混合Mamba架构无损应用于超大型推理模型。
Mamba 架构相较于 Transformer 可以处理更长的上下文,同时可以大幅降低推理时的内存占用和算力成本。
混元T1能有效解决长文推理中常见的上下文丢失和长距离信息依赖问题。同时,混合Mamba架构针对长序列处理进行了专项优化,通过高效的计算方式,在确保长文本信息捕捉能力的同时大幅降低资源消耗。
他们这个混合架构可以确保长文本信息捕捉能力的同时大幅降低资源消耗,在相近的激活参数量下,实现了解码速度提升2倍。而且首字时延低于1秒,实际应用中可以做到秒回。




特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

/阅读下一篇/

为了让大家一键生成更漂亮的可视化网页,我写了个工具!

返回网易首页 下载网易新闻客户端
相关推荐
热点推荐
官宣!大规模裁员10000人

官宣!大规模裁员10000人

中国基金报
2025-03-29 10:23:13
去吃了一次农家乐,才明白:为何如今不受欢迎了?5个原因很现实

去吃了一次农家乐,才明白:为何如今不受欢迎了?5个原因很现实

餐饮新纪元
2025-03-29 07:04:47
别再可怜李咏了!离世后国内医生猜测患癌真相,难怪选择葬身美国

别再可怜李咏了!离世后国内医生猜测患癌真相,难怪选择葬身美国

云舟史策
2025-02-09 07:00:06
许昌女教师陈岸君被捕,奇特的补课方式揭露后,家长们崩溃了

许昌女教师陈岸君被捕,奇特的补课方式揭露后,家长们崩溃了

清茶浅谈
2025-02-25 11:45:43
火箭客场斗太阳!预计首发出炉:航天城5虎不变,主队两巨头领衔

火箭客场斗太阳!预计首发出炉:航天城5虎不变,主队两巨头领衔

熊哥爱篮球
2025-03-30 12:46:30
出厂即落伍!台湾期盼多年的“神器”终于交付,但太晚了

出厂即落伍!台湾期盼多年的“神器”终于交付,但太晚了

枢密院十号
2025-03-29 23:54:06
马思唯公布恋情!PSY.P要结婚了!

马思唯公布恋情!PSY.P要结婚了!

嘻笑堂
2025-03-29 15:26:37
沪疆大战太暖!血布暖心告别+喊话下赛季!刘炜和沪迷大合影!

沪疆大战太暖!血布暖心告别+喊话下赛季!刘炜和沪迷大合影!

篮球资讯达人
2025-03-30 00:27:55
AI将经典港产片吉卜力化,梁朝伟惨变蒙猪眼、许冠文撞样郑则仕?

AI将经典港产片吉卜力化,梁朝伟惨变蒙猪眼、许冠文撞样郑则仕?

粤睇先生
2025-03-29 03:55:51
层高3米,当代顶级阳谋:未来80%的二手房,都将沦为时代的产物

层高3米,当代顶级阳谋:未来80%的二手房,都将沦为时代的产物

山丘楼评
2025-03-18 22:39:06
国服疯狂骚操作的背后,是为了后续开《魔兽世界2》

国服疯狂骚操作的背后,是为了后续开《魔兽世界2》

魔兽世界情报局
2025-03-30 12:30:57
感谢恒大!20岁恒大青训后腰中超爆发:伊万国足最大发现!

感谢恒大!20岁恒大青训后腰中超爆发:伊万国足最大发现!

邱泽云
2025-03-29 19:01:27
一女子带齐白石画鉴宝,专家鉴定为赝品,女子笑道:你可知我是谁

一女子带齐白石画鉴宝,专家鉴定为赝品,女子笑道:你可知我是谁

瑶卿文史
2025-03-13 18:17:21
大S手段不简单!11岁小玥儿和13岁许老三 近况曝光,差距一目了然

大S手段不简单!11岁小玥儿和13岁许老三 近况曝光,差距一目了然

阿裤趣闻君
2025-03-28 10:04:45
地球出现“第二人类文明”?巴拿马猴学会石器生活,引科学界担忧

地球出现“第二人类文明”?巴拿马猴学会石器生活,引科学界担忧

答案在这儿
2025-03-29 11:09:18
哈尔滨楼市全军覆没,哈尔滨楼市群力新区房价从1.2万跌至1.1万

哈尔滨楼市全军覆没,哈尔滨楼市群力新区房价从1.2万跌至1.1万

有事问彭叔
2025-03-29 21:07:10
7分钟2球,36岁吴曦惊艳破门,上海申花3-1逆转,3轮不败升至第2

7分钟2球,36岁吴曦惊艳破门,上海申花3-1逆转,3轮不败升至第2

侧身凌空斩
2025-03-29 19:57:14
加密货币集体暴跌!超13万人爆仓

加密货币集体暴跌!超13万人爆仓

数据宝
2025-03-30 12:40:07
你无意中看到了什么不该看的东西?网友:每一个都是炸裂的存在

你无意中看到了什么不该看的东西?网友:每一个都是炸裂的存在

美好客栈大掌柜
2024-11-03 05:55:57
黄峥4.8亿抄底香港浅水湾!十年最大银主盘交易,大佬捡漏有多狠

黄峥4.8亿抄底香港浅水湾!十年最大银主盘交易,大佬捡漏有多狠

小米亚的故事
2025-03-29 18:56:36
2025-03-30 13:16:49
歸藏的AI工具箱 incentive-icons
歸藏的AI工具箱
关注人工智能、LLM 、 AI 图像视频和设计
34文章数 19关注度
往期回顾 全部

科技要闻

雷军:用户愿花50多万买小米汽车 超我想象

头条要闻

北京司机掉头等红灯被"围攻" 交管部门立马装辅助标志

体育要闻

NBA初代老六,42岁进入生涯巅峰?!

娱乐要闻

绝望的文盲!赵露思又诠释这5个字

财经要闻

利率3%以下银行消费贷或被叫停

汽车要闻

3.89万!长安Lumin萌宝版上市40台Lumin全部送出

态度原创

房产
本地
时尚
教育
公开课

房产要闻

刚刚,央企大手笔迈瀛拿地!海口大规模旧改又来了!

本地新闻

我在新昌当女主|穿岩十九峰秒入江湖,武侠迷必冲!

时髦女人的家,比她的穿搭更美

教育要闻

雅思词汇解析(132)| 极限运动

公开课

李玫瑾:为什么性格比能力更重要?