IT之家 9 月 26 日消息,腾讯混元 3D 生成模型家族今日迎新,混元 3D-Omni、混元 3D-Part 发布并开源。
混元 3D-Omni、混元 3D-Part 将完整开放推理代码和权重,全面开源、免费使用,便于学术研究和工业部署。
混元 3D-Omni
混元 3D-Omni 基于混元 3D 2.1 开源模型构建,通过轻量化的统一控制编码器和渐进式难度感知训练策略,混元 3D-Omni 能融合最多四类控制条件,提升生成的可控性和质量:
▲ 骨骼控制人物姿态
▲ 点云控制补充三维信息
▲ 边界框控制不同比例
▲ 边界框控制解决单图生成“纸片”问题
▲ 体素控制物体结构
这些控制条件可灵活组合,支持深度相机、LiDAR 或重建模型等输入来源。社区开发者还可基于开源模型轻松扩展更多创意条件,如额外的人物姿态控制。
混元 3D-Part
混元最新推出的混元 3D-Part 技术,由业界首个原生 3D 分割模型 P3-SAM 与工业级组件生成模型 X-Part 组成,首次实现高精度、可控的组件式 3D 生成,支持 50 + 组件自动生成。
▲ P3-SAM 的组件分割结果
▲ X-Part 的组件生成结果
用户用混元 3D 2.5 或 3.0 模型生成整体 Mesh 后,即可通过 P3-SAM 获取语义特征和边界框,进行自动、精确的组件分割,X-Part 接棒将整体 Mesh 分解为独立部件,输出高保真、结构一致的部件几何体,同时保持灵活可控性。
▲ Hunyuan3D-Part 组件拆分整体流程
在 PartObj-Tiny、PartObj-Tiny-WT 和 PartNetE 等基准测试中,Hunyuan3D-Part 的分割和生成结果大幅超越现有工作。
▲ X-Part 组件生成结果和开源工作对比
X-Part 的生成结果和闭源 R 模型对比:
目前该模型也已经上线混元 3D Studio,通过腾讯混元 3D 创作引擎即可免费使用。
IT之家附两款模型开源地址如下:
【混元 3D-Omni】