写点什么

腾讯混元 3D 生成大模型 2.0 开源发布:大幅升级,几何与纹理解耦,3D 生成更逼真

  • 2025-01-22
    北京
  • 本文字数:1665 字

    阅读完需:约 5 分钟

腾讯混元3D生成大模型2.0开源发布:大幅升级,几何与纹理解耦,3D生成更逼真

近日,腾讯混元正式宣布开源其 3D 生成大模型 2.0 版本,并推出业界首个一站式 3D 内容 AI 创作平台——“混元 3D AI 创作引擎”。该引擎集成了从文本/图像生成 3D,到 3D 动画、纹理生成、低面数模型生成、个性化 3D 人物定制以及 3D 小游戏创作等能力,为创作者和企业提供了可快速搭建 3D 创作管线的全流程解决方案。开发者可在 GitHub、Hugging Face 等社区获取最新的模型与代码,普通用户也可通过线上平台直接体验。


混元 3D AI 创作引擎 https://3d.hunyuan.tencent.com/

代码仓库: https://github.com/tencent/Hunyuan3D-2

模型权重:https://huggingface.co/tencent/Hunyuan3D-2


据腾讯混元方面介绍,相较于此前开源的 1.0 版本,新发布的 2.0 版本最大的技术突破在于实现了几何与纹理的解耦生成,生成效果更加精细。几何大模型由 Hunyuan3D-DiT 与 Hunyuan ShapeVAE 组成,能够生成高精度白模,几乎接近专业设计师手工建模的水准;纹理大模型 Hunyuan3D-Paint 则采用多视图扩散技术,为模型提供逼真的贴图与材质。



评测数据显示,在 In-the-wild 测试集上,2.0 版本在 CLIP Maximum Mean Discrepancy(CMMD)、Frechet Inception Distance(FID)以及 CLIP-score 等多项指标上均优于目前业界先进的开源或闭源模型。


整体模型比较


几何模型比较


纹理模型比较


值得注意的是,此次同步上线的“混元 3D AI 创作引擎”定位于“低门槛、一站式”。平台功能覆盖了 3D 建模生成、骨骼动画驱动、纹理生成与替换、草图生 3D、3D 人物生成、3D 小游戏创作等多个环节。例如:


  • 文生 3D、图生 3D:输入提示词或上传图片,即可快速生成 3D 模型,可选择不同材质风格,并支持 PBR 贴图,让生成结果更具真实感;

  • 端到端生成低多边形 low-poly 模型:可根据物体复杂度自适应生成数百至数千面的三角面,既保留模型细节,又方便在游戏引擎中渲染;

  • 3D 动画生成:可为角色模型自动绑定骨骼,选择动作模板进行驱动;

  • 草图生 3D:一张简笔画加几句文字描述,即可完成 3D 内容创作;

  • 3D 人物生成:上传一张人像,选择不同主题模板即可生成个性化 3D 形象;

  • 3D 小游戏创作:只需上传头像并选定角色模板,一键生成专属 IP 角色的小游戏动画视频。



此外,创作引擎还支持以“工作流”形式快速搭建 3D 生产管线。用户可以通过节点化搭建,批量生成、编辑 3D 内容,更好地适配游戏美术、动画制作等专业场景。


目前,3D AIGC 技术在游戏制作、社交、电商广告、工业制造、具身智能、自动驾驶、AR/VR 等多个领域已开始加速落地。例如,在游戏开发中,AIGC 工具可以大量生成高质量游戏角色、场景、道具等 3D 资产,以此提高开发效率、缩短制作周期;电商广告可用 3D 生成快速搭建创意商品模型;工业设计中也可借助 AI 大模型验证产品原型。


腾讯游戏在研项目研发制作人王智刚在受访中提到,在游戏制作管线中,特别是美术环节,传统手工方式往往耗时较长,比如一个高精度模型需要数周甚至更久。随着混元 3D 的引入,一些初级模型的制作成本已显著降低,很多时候只需进行少量人工修补即可投入使用。“我们并不指望一开始就让 AI 替代所有流程,这是渐进式的过程,AI 能帮忙解决很多问题,人工再修一下,减少我们的工作量,这是很好的事。”


尽管 3D 生成的应用前景被广泛看好,但腾讯混元 3D 负责人郭春超在受访时亦坦言,3D 视频生成的技术成熟度还未到发展的拐点,但它正快速迭代,视觉合格率仅用一年时间就从 20%提升到 60%的水平。他提到,3D AIGC 目前依然面临数据和技术方面的挑战。


一方面,相比于文本、图像和视频,3D 训练数据的规模相对有限,模型要在“几何+纹理”融合的复杂度上达到更高水平,还需要持续投入和更多场景数据;另一方面,3D 模型本身相对于别的模态约束比较少,与视频在时序上一帧一帧地演进不同,3D 模型可以在空间上任意“转动”“变形”,每一个视角、每一帧都可能是一个独立的全新图像,从技术特点本身而言,要解决的挑战也会更大。


当被问及混元 3D 未来发展方向时,郭春超表示,团队将继续在“纵向深挖”与“横向拓展”两方面发力。“纵向”指的是持续提升单体模型的精度和可控度,“横向”则是继续沿着 3D 内容制作管线的需求,将更多功能模块化、标准化,并与其他模态(如文本、视频)进行深度融合。

2025-01-22 11:129536

评论

发布
暂无评论
发现更多内容

毕业设计-电商秒杀系统

doublechun

「架构实战营」

一个cpp协程库的前世今生(十五)递归互斥量

SkyFire

c++ cocpp

1 月月更|推荐学Java——数据表高级操作

逆锋起笔

MySQL 事务 范式 Java后端 MySQL 数据库

无聊的周末用Java写个扫雷小游戏

秦怀杂货店

Java 数据结构 游戏

国内外研究多模态的知名团队有哪些?

你?

推荐 研究

hive metastore配置kerberos认证

从大数据到人工智能

hive kerberos hive metastore

Java中方法重写和方法重载的6个区别?

王磊

详解数据中台的底层架构逻辑

五分钟学大数据

数据中台 数据仓库 1月月更

使用 KubeSphere 管理 Amazon EKS Anywhere 集群

亚马逊云科技 (Amazon Web Services)

存储

2021年vivo互联网技术最受欢迎文章TOP25

vivo互联网技术

数据库 前端 服务器 年度总结 Vivo

2022年中科柏诚服务再提升,为银行数字化转型提供精准化助力

联营汇聚

如果你是加勒比海盗首领,会选择哪种算法来使价值最大化?

博文视点Broadview

C语言-数组

DS小龙哥

C语言

Vue3 企业级网站建设

詹Sir

Vue 建站

10 Prometheus 之监控应用程序

穿过生命散发芬芳

Prometheus 1月月更

Kafka核心组件之Controller概念介绍(1)

Kafka中文社区

基于多源数据画像的失败用例智能分析

华为云开发者联盟

云原生 测试 日志 失败用例 智能分析

Kafka的副本管理器读写副本消息

JavaEdge

1月月更

Amazon Elastic File System新增低成本单区存储类

亚马逊云科技 (Amazon Web Services)

存储

2021大厂面试题之redis篇

小麦

面试题 redis' 大厂面经

ONES 收购为知笔记,全面升级企业知识库产品

万事ONES

ONES 知识库

C语言-语句(if,for,while,switch,goto,return,break,continue)

DS小龙哥

C语言

新型数据中心的必选项:“超融合”的三重价值

脑极体

新增功能 – Amazon FSx for NetApp ONTAP

亚马逊云科技 (Amazon Web Services)

存储

Java 常用类大讲解!2️⃣(手写 API、源码必备)

XiaoLin_Java

Java 集合 基础 1月月更

Tableau Day5:空间分析

贾献华

1月月更

ReactNative进阶(十一):realm 数据库

No Silver Bullet

React Native 1月月更 realm

如何使用 Amazon S3 多区域访问点提高多区域应用程序的性能速度和可用性

亚马逊云科技 (Amazon Web Services)

二、程序如何执行

喵叔

Go 中实现用户的每日限额(比如一天只能领三次福利)

万俊峰Kevin

Go 限流 Go 语言 rate-limit RateLimit

C语言-基本数据类型与位运算

DS小龙哥

C语言

腾讯混元3D生成大模型2.0开源发布:大幅升级,几何与纹理解耦,3D生成更逼真_腾讯_罗燕珊_InfoQ精选文章