写点什么

腾讯混元 3D 生成大模型 2.0 开源发布:大幅升级,几何与纹理解耦,3D 生成更逼真

  • 2025-01-22
    北京
  • 本文字数:1665 字

    阅读完需:约 5 分钟

腾讯混元3D生成大模型2.0开源发布:大幅升级,几何与纹理解耦,3D生成更逼真

近日,腾讯混元正式宣布开源其 3D 生成大模型 2.0 版本,并推出业界首个一站式 3D 内容 AI 创作平台——“混元 3D AI 创作引擎”。该引擎集成了从文本/图像生成 3D,到 3D 动画、纹理生成、低面数模型生成、个性化 3D 人物定制以及 3D 小游戏创作等能力,为创作者和企业提供了可快速搭建 3D 创作管线的全流程解决方案。开发者可在 GitHub、Hugging Face 等社区获取最新的模型与代码,普通用户也可通过线上平台直接体验。


混元 3D AI 创作引擎 https://3d.hunyuan.tencent.com/

代码仓库: https://github.com/tencent/Hunyuan3D-2

模型权重:https://huggingface.co/tencent/Hunyuan3D-2


据腾讯混元方面介绍,相较于此前开源的 1.0 版本,新发布的 2.0 版本最大的技术突破在于实现了几何与纹理的解耦生成,生成效果更加精细。几何大模型由 Hunyuan3D-DiT 与 Hunyuan ShapeVAE 组成,能够生成高精度白模,几乎接近专业设计师手工建模的水准;纹理大模型 Hunyuan3D-Paint 则采用多视图扩散技术,为模型提供逼真的贴图与材质。



评测数据显示,在 In-the-wild 测试集上,2.0 版本在 CLIP Maximum Mean Discrepancy(CMMD)、Frechet Inception Distance(FID)以及 CLIP-score 等多项指标上均优于目前业界先进的开源或闭源模型。


整体模型比较


几何模型比较


纹理模型比较


值得注意的是,此次同步上线的“混元 3D AI 创作引擎”定位于“低门槛、一站式”。平台功能覆盖了 3D 建模生成、骨骼动画驱动、纹理生成与替换、草图生 3D、3D 人物生成、3D 小游戏创作等多个环节。例如:


  • 文生 3D、图生 3D:输入提示词或上传图片,即可快速生成 3D 模型,可选择不同材质风格,并支持 PBR 贴图,让生成结果更具真实感;

  • 端到端生成低多边形 low-poly 模型:可根据物体复杂度自适应生成数百至数千面的三角面,既保留模型细节,又方便在游戏引擎中渲染;

  • 3D 动画生成:可为角色模型自动绑定骨骼,选择动作模板进行驱动;

  • 草图生 3D:一张简笔画加几句文字描述,即可完成 3D 内容创作;

  • 3D 人物生成:上传一张人像,选择不同主题模板即可生成个性化 3D 形象;

  • 3D 小游戏创作:只需上传头像并选定角色模板,一键生成专属 IP 角色的小游戏动画视频。



此外,创作引擎还支持以“工作流”形式快速搭建 3D 生产管线。用户可以通过节点化搭建,批量生成、编辑 3D 内容,更好地适配游戏美术、动画制作等专业场景。


目前,3D AIGC 技术在游戏制作、社交、电商广告、工业制造、具身智能、自动驾驶、AR/VR 等多个领域已开始加速落地。例如,在游戏开发中,AIGC 工具可以大量生成高质量游戏角色、场景、道具等 3D 资产,以此提高开发效率、缩短制作周期;电商广告可用 3D 生成快速搭建创意商品模型;工业设计中也可借助 AI 大模型验证产品原型。


腾讯游戏在研项目研发制作人王智刚在受访中提到,在游戏制作管线中,特别是美术环节,传统手工方式往往耗时较长,比如一个高精度模型需要数周甚至更久。随着混元 3D 的引入,一些初级模型的制作成本已显著降低,很多时候只需进行少量人工修补即可投入使用。“我们并不指望一开始就让 AI 替代所有流程,这是渐进式的过程,AI 能帮忙解决很多问题,人工再修一下,减少我们的工作量,这是很好的事。”


尽管 3D 生成的应用前景被广泛看好,但腾讯混元 3D 负责人郭春超在受访时亦坦言,3D 视频生成的技术成熟度还未到发展的拐点,但它正快速迭代,视觉合格率仅用一年时间就从 20%提升到 60%的水平。他提到,3D AIGC 目前依然面临数据和技术方面的挑战。


一方面,相比于文本、图像和视频,3D 训练数据的规模相对有限,模型要在“几何+纹理”融合的复杂度上达到更高水平,还需要持续投入和更多场景数据;另一方面,3D 模型本身相对于别的模态约束比较少,与视频在时序上一帧一帧地演进不同,3D 模型可以在空间上任意“转动”“变形”,每一个视角、每一帧都可能是一个独立的全新图像,从技术特点本身而言,要解决的挑战也会更大。


当被问及混元 3D 未来发展方向时,郭春超表示,团队将继续在“纵向深挖”与“横向拓展”两方面发力。“纵向”指的是持续提升单体模型的精度和可控度,“横向”则是继续沿着 3D 内容制作管线的需求,将更多功能模块化、标准化,并与其他模态(如文本、视频)进行深度融合。

2025-01-22 11:1215345

评论

发布
暂无评论

区块链游戏解说:什么是 Arcade Champion

Footprint Analytics

追踪Jira中项目成本与工时,更符合国人使用习惯——TimeWise工时管理

龙智—DevSecOps解决方案

DevOps DevSecOps Atlassian

亚马逊云科技为派拓网络打造数字安全平台产品组合

财见

测试开发名企定向培养训练营,手把手带你提升核心竞争力!

测试人

软件测试 自动化测试 测试开发

以解析csv数据为例,讨论string、char[]、stream 不同类型来源是否能进行高性能读取解析封装可能性

八苦-瞿昙

C#

活动回顾 | DevData Talks沙龙深圳站:中小到千人规模团队研发效能提升实践

思码逸研发效能

在本地运行 LLMs 的 6 种方法

SEAL安全

人工智能 开源 LLMs

手机厂商的开年大考:卷AI,还是卷MR?

Alter

MR 大模型 AI手机

Supermicro 通过新基础设施解决方案,加速 5G 和电信云工作负载性能

财见

EMQX Enterprise 5.5 发布:新增 Elasticsearch 数据集成

EMQ映云科技

mqtt mqtt broker

破防了,谁懂啊家人们:记一次mysql问题排查

阿里技术

MySQL 索引 问题排查 表结构

访问串是什么?有什么作用?

行云管家

运维 IT运维 访问串

通过解析库探究函数式抽象代价

八苦-瞿昙

C#

通过解析库探究函数式抽象代价 ( ini 解析示例补充)

八苦-瞿昙

C#

Udemy 上最受欢迎的免费编程课程

秃头小帅oi

php 学习 React 课程 java

蜗牛游戏宣布利用AI技术提升其开发流程

财见

聊聊Java 类属性与类方法的应用

伤感汤姆布利柏

Java 前端

即时通讯技术文集(第34期):IM群聊技术合集(Part1) [共15篇]

JackJiang

网络编程 即时通讯 IM

PTS 3.0:开启智能化的压测瓶颈分析

阿里巴巴云原生

阿里云 云原生 压测

致 Tapdata 全体用户:2023 年,我们把更多精力集中到了产品能力和稳定性上

tapdata

数据库

教你如何用Keepalived和HAproxy配置高可用 Kubernetes 集群

华为云开发者联盟

开发 华为云 华为云开发者联盟

SNZ资本的首席信息官Gavin确认出席Hack .Summit() 2024香港开发者大会!

TechubNews

跨端轻量JavaScript引擎的实现与探索

京东零售技术

JavaScript

用“AI产业顾问”写企业分析报告,五天工作10分钟搞定!

飞桨PaddlePaddle

百度 BAIDU 百度飞桨 文心大模型 文心大模型4.0

云平台纳管是什么意思?用什么工具比较好?

行云管家

云计算 云服务 云平台 云管平台 云管理

策略分析:Atlassian Server版停止支持,Server版用户应该转向数据中心版本还是云版?

龙智—DevSecOps解决方案

客户案例 | 思码逸DevInsight帮助企业提炼关键指标,建立研发效能体系

思码逸研发效能

喜讯 | 思码逸Devinsight 入选中国信通院《高质量数字化转型产品及服务全景图》

思码逸研发效能

腾讯混元3D生成大模型2.0开源发布:大幅升级,几何与纹理解耦,3D生成更逼真_腾讯_罗燕珊_InfoQ精选文章