网易首页 > 网易号 > 正文 申请入驻

腾讯混元发布3D建模“全能王”!草图速变3D、一键换皮贴骨,小白零门槛上手

0
分享至

将3D资产一键生成、一键换皮肤、一键变动画,还有一键生成3D游戏视频,现在,腾讯混元3D创作引擎通通做到了!

智东西1月21日报道,今日,腾讯混元宣布开源3D生成大模型2.0版,并上线业界首个一站式、低门槛3D AI创作引擎「混元3D创作引擎」,为普通用户UGC和游戏等专业场景提供一款高效的3D内容生产工具。


混元3D创作引擎包含三层架构,设计目标是用AI覆盖3D管线多个环节,打造功能最全的3D AI创作平台:

(1)模型层:基于3D-DiT和3D-Paint基础模型;

(2)能力层:含3D功能矩阵+3D生成工作流+3D创作素材库;

(3)应用层:提供可低成本定制的业务场景解决方案。

混元3D基础模型同时支持文生3D和图生3D,几何结构精细度提升,纹理色彩丰富,支持纹理风格选择与PBR贴图。

3D功能矩阵瞄准3D创作管线,提供丰富的生成和编辑3D资产能力,包括草图生3D、3D风格化、3D纹理生成、3D人物生成、3D小游戏创作等。

灵感广场陈列了3D模型素材库,右上方可选不同场景类目(游戏道具、人物角色、商品、动植物等)。


用该平台生成的3D模型,支持通过链接形式分享给好友,并支持在PC端、移动端进行模型预览、交互及下载。

体验直通车:https://3d.hunyuan.tencent.com/

当前游戏制作、社交、电商广告、工业制造、具身智能、自动驾驶、AR/VR、三维打印等领域都积极应用AI能力辅助3D内容生成。混元3D生成大模型此前已开始应用于游戏、社交、腾讯地图、腾讯云、机器人等腾讯内部业务。

以游戏业务为例,AI生成3D模型对游戏研发增效作用明显,能够减少美术成本和时间成本。传统流程制作单角色模型需要花费6~100天,而AI生成单角色模型的时长仅分钟级。

腾讯混元3D模型已全面开放+开源:面向企业、个人开发者提供商用品质的3D开源模型,为机器人仿真、自动驾驶等领域提供数据燃料;降低3D资产的生成周期、成本,推动3D普及。

混元还为科研学者提供更大的3D基础模型,加速研究探索,并从企业界的新视角,帮研究者寻找有价值的研究方向。

混元3D模型2.0开源主页:https://3d-models.hunyuan.tencent.com/

代码仓库:https://github.com/Tencent/Hunyuan3D-2/

一、支持文/图生3D,能模拟逼真材质

混元3D创作引擎同时支持文生3D和图生3D。用户可以结合3D风格化、渲染打光、骨骼绑定&动作驱动等3D模型编辑工具能力,调整模型效果。

文生3D模式提供了预设prompt和prompt指南。输入提示词后能一次生成4个模型,可选择不同纹理风格(包括卡通、中国风、青花瓷、石雕、赛博朋克等)。


如果选择图生3D模式,则可以通过上传单图来生成3D模型。


据介绍,混元近期将推出通过多视图生成3D模型的功能,以实现更高的可控性。

两种模式均支持PBR贴图,可通过模拟物理特性,生成逼真的模型材质效果。

此外,创作引擎支持端到端低多边形模型生成。生成结果能够在低面片的基础上最大化体现模型细节,拓扑布线更加符合美术标准,更适用于游戏引擎模型渲染。

其首个支持端到端生成低多边形low-poly模型,可根据物体复杂程度,自适应生成几百至数千面的三角mesh,在面数更低的同时可保证模型细节效果。

二、花式应用玩法:简笔画秒变3D、白模一键换皮、自制Q版玩偶

创作引擎的“实验室”页面提供了3D动画生成、3D纹理生成、3D人物生成、草图生3D、3D小游戏创作等应用,作为3D模型应用的展示模块。


(1)草图生3D:上传线稿草图或选择草图素材,输入纹理、颜色等特性的文本描述,即可一键将二维草图转换成高质量的3D模型。


(2)3D纹理生成:上传3D模型或选择预置白模,输入文字指令或图片,该功能就能“一键换皮肤”,生成与上传模型或白模几何一致的高清纹理贴图,还能选择生成PBR材质贴图。

(3)3D动画生成:上传模型或选择预置模型,AI就会对生成3D角色模型实现自动绑骨蒙皮。用户可以选择不同的动作模版,让3D模型动起来。


(4)3D人物生成:上传人物图像,选择角色模版,该功能就能生成符合个性化的3D人物角色,实现个人UGC 3D形象定制。

(5)3D小游戏创作:上传一张头像,选择角色模版,一键生成个人专属IP角色的游戏动画视频,并支持分享转发。

还有一个混元3D特色功能——面向专业用户的3D生成工作流,通过模块化节点设计,实现单点功能串联,提供预设的工作流模版、工作流编辑器、工作台管理能力,帮助专业用户在游戏开发、动画制作等领域快速搭建3D生成工作流。

其提供的工作流模版类型多样,有文/图生3D角色、文/图生3D道具,能够满足不同业务场景的需求。用户仅需加载模版,根据自己的需求输入提示词或上传图片,调整节点生成参数,就能一键生成具有特定风格或特征的3D资产。

这为专业用户提供了更便捷、更高效、更低门槛的3D创作工具。

三、混元3D生成大模型2.0全面开源:升级几何结构、纹理色彩

工业界3D模型多为闭源。去年11月全面开源的混元3D生成大模型1.0,是业界最早的端到端3D大模型之一,也是业界首个同时支持文字、图像生成3D的开源大模型。

2.0版本依然同时支持文、图生3D,是业界最早一批3D-DiT原生大模型,并通过将几何、纹理解耦生成,几何结构更加精细,纹理色彩更加丰富。从下图可以看到,2.0版本的生成效果明显提升:

3D生成模型主要包括几何和纹理生成两部分。几何大模型专注于捕捉物体的形状、结构和空间关系,纹理大模型则专注于颜色、细节和表面特征。

这种专注性使得每个模型能在其领域内进行更深入的学习和优化,而几何与纹理解耦生成的方式,让整体生成能力达到更高上限,能够生成更为精细和真实的3D结果。

几何大模型和纹理大模型各自表现优异。其中,几何大模型由Hunyuan3D-DiT模型和Hunyuan ShapeVAE组成,能实现超高精度的白模生成,几乎达到了设计师手工建模的水平。

纹理大模型Hunyuan3D-Paint则采用多视图扩散生成的方案,可以基于用户输入的参考图像对生成的几何白模进行纹理贴图,还能支持对用户任意输入的几何模型进行任意文本或图像引导的纹理生成。

腾讯混元从定量和定性两个维度进行了评估,在收集的In-the-wild测试集上,对3D生成质量进行了定量评估。

根据CLIP Maximum Mean Discrepancy(CMMD)、Frechet Inception Distance(FID)、CLIP-score指标,不论是端到端最终3D资产的质量,还是几何模型生成的几何结构以及纹理基础模型生成纹理的质量,Hunyuan3D-2.0的整体表现均优于当前业界包括闭源模型在内的先进模型。

在定性评估方面,从整体满意度、3D物体质量、指令遵循三个维度进行用户主观评估,结果显示,Hunyuan3D-2.0在生成质量上优于当前最先进的开源模型。

结语:未来将更多面向应用标准而研发

腾讯混元3D负责人郭春超谈道,混元3D生成大模型从1.0版本的率先开源,到快速升级2.0版本并开放业界首个一站式3D AI创作平台,希望切实帮助大众爱好者、开发者、创作者们降低使用门槛,提升创作效率,让3D大模型技术在各行各业发挥价值。

3D创作门槛很高,纯手工制作既贵又慢。其中3D制作管线十分复杂,运转涉及6大项、超过30个环节,涉及几何、纹理、布线、骨骼等多种模态,而且各环节前后依赖,对3D建模专业知识要求高。只有基础模型远远不够。

对于3D基础模型而言,提高可控性、可用性都是当务之急,数据不足也是掣肘模型发展的一大挑战。目前此类模型的技术趋势包括构建高效3D表示、探索3D-DiT架构上限以及探索3D生成新范式。

学术3D生成技术与制作管线存在差异大的问题。基模接入管线需要深度考虑语义,涉及重拓扑、UV展开、骨骼绑定与驱动等大量研发工作。

据介绍,混元未来将更多面向应用标准而研发,真正兼容3D管线需求。同时,混元也会持续为开源社区贡献力量。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
德比斯收获中国第一支广告代言!与中国游戏发行商“阿狗社”签约

德比斯收获中国第一支广告代言!与中国游戏发行商“阿狗社”签约

记录生活日常阿蜴
2026-05-17 21:19:27
女子出轨6年终上位,婚礼大操大办被疯狂吐槽,亲友表情哭笑不得

女子出轨6年终上位,婚礼大操大办被疯狂吐槽,亲友表情哭笑不得

辣媒专栏记录
2026-05-05 08:23:26
马斯克居然转发和雷军的那张合照,还配了一个笑哭地表情包

马斯克居然转发和雷军的那张合照,还配了一个笑哭地表情包

坠入二次元的海洋
2026-05-17 21:55:17
德比斯回应2天2冠:对手没想到我会绝杀他 感谢张雪机车感谢兄弟

德比斯回应2天2冠:对手没想到我会绝杀他 感谢张雪机车感谢兄弟

风过乡
2026-05-17 20:49:20
记者:德科凭借转会市场精准操作,在弗里克的支持下重建巴萨

记者:德科凭借转会市场精准操作,在弗里克的支持下重建巴萨

懂球帝
2026-05-18 08:24:09
深度科普:动物只会在发情期交配,为何人类随时都可以“交配”?

深度科普:动物只会在发情期交配,为何人类随时都可以“交配”?

宇宙时空
2026-05-17 17:20:10
大三男生泰国失联超60天,90多岁爷爷奶奶至今仍不知情,母亲整日以泪洗面:已办好护照,打算赴泰寻子

大三男生泰国失联超60天,90多岁爷爷奶奶至今仍不知情,母亲整日以泪洗面:已办好护照,打算赴泰寻子

极目新闻
2026-05-17 18:20:30
穆里尼奥:下周皇马会和我直接对话,我会在那时做出决定

穆里尼奥:下周皇马会和我直接对话,我会在那时做出决定

懂球帝
2026-05-17 19:20:17
调查发现:老年人若经常吃香蕉,用不了多久,身体或迎来3大改变

调查发现:老年人若经常吃香蕉,用不了多久,身体或迎来3大改变

芹姐说生活
2026-05-15 15:06:08
比日本还嚣张!为支持台湾与中国断交后,又要求中国主动低头求和

比日本还嚣张!为支持台湾与中国断交后,又要求中国主动低头求和

杰丝聊古今
2026-05-02 11:06:33
人活多久,看喝酒就知道?寿命短的人,喝酒一般有这6个特征

人活多久,看喝酒就知道?寿命短的人,喝酒一般有这6个特征

芹姐说生活
2026-05-17 23:29:06
把瑜伽裤穿成日常的松弛感美女

把瑜伽裤穿成日常的松弛感美女

只要高兴就好
2026-04-13 14:30:30
邮报:曼城内部人士称瓜帅已决心离队,且教练组会有较大变动

邮报:曼城内部人士称瓜帅已决心离队,且教练组会有较大变动

懂球帝
2026-05-17 20:04:42
朝鲜战争期间:美军原本已接近击败中国,却碰上中国决死的指挥官

朝鲜战争期间:美军原本已接近击败中国,却碰上中国决死的指挥官

最美的巧合
2026-05-16 19:15:22
图灵奖得主杨立昆最新访谈:LLM时代即将落幕?下一个技术风口

图灵奖得主杨立昆最新访谈:LLM时代即将落幕?下一个技术风口

新浪财经
2026-05-18 01:29:38
50岁李小冉机场吃面,褪去滤镜才懂,普通人的衰老藏不住

50岁李小冉机场吃面,褪去滤镜才懂,普通人的衰老藏不住

草莓解说体育
2026-05-17 20:14:30
花生再次被关注!调查发现:糖尿病常吃花生不过半年或有4好处

花生再次被关注!调查发现:糖尿病常吃花生不过半年或有4好处

芹姐说生活
2026-05-15 23:37:01
1-0!姆巴佩状态堪忧,屡次错失良机,熊皇一剑封喉,皇马2连胜

1-0!姆巴佩状态堪忧,屡次错失良机,熊皇一剑封喉,皇马2连胜

我的护球最独特
2026-05-18 02:58:05
任正非论AI:一位工业哲学家的清醒与远见

任正非论AI:一位工业哲学家的清醒与远见

新浪财经
2026-05-17 00:29:09
虚构:胡雪岩破产后才明白:左宗棠之所以袖手旁观,并非因为无情

虚构:胡雪岩破产后才明白:左宗棠之所以袖手旁观,并非因为无情

卡西莫多的故事
2026-01-30 09:51:45
2026-05-18 09:07:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
11838文章数 117077关注度
往期回顾 全部

科技要闻

Anthropic CEO访谈:Claude新功能几乎完全由AI自主开发

头条要闻

牛弹琴:特朗普很焦虑 出访回国后几小时就召高官开会

头条要闻

牛弹琴:特朗普很焦虑 出访回国后几小时就召高官开会

体育要闻

生死战只拿3分的核心,还有留的必要吗?

娱乐要闻

卢昱晓道歉:认识到问题严重性!

财经要闻

安徽酒局上,还有多少古井贡酒?

汽车要闻

车长超5米/双动力可选 昊铂S600预售权益价18.89万起

态度原创

家居
亲子
数码
公开课
军事航空

家居要闻

110㎡淡而有致的生活表达

亲子要闻

8岁年龄,10岁骨龄!别再只查零食了,90%的家长都搞错了重点

数码要闻

联想新本:骁龙X2 Plus+32GB内存

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

黎以停火再延长 空袭却未停止

无障碍浏览 进入关怀版