9 月 26 日,腾讯宣布,混元3D生成模型家族又添新成员——混元3D-Omni、混元3D-Part发布并开源。这也是腾讯混元在可控3D生成上的新突破,让AI 3D建模更具实用性,加速3D生成模型在游戏、打印和 AR/VR 等实际生产流程中的落地应用。 作为业界首个统一支持多条件控制的3D生成框架,混元3D-Omni 突破传统图像输入的局限性,支持多种模态输入,实现对物体几何结构、拓扑和姿态的精细控制。混元3D-Part则实现了灵活可控的部件拆分和生成,让分解和生成3D模型像玩乐高一样简单。 混元3D-Omni、混元3D-Part将完整开放推理代码和权重,全面开源、免费使用,便于学术研究和工业部署,助力可控3D生成的社区探索。 混元3D-Omni:3D界的“ControlNet”,多条件控制一网打尽 近年来,基于原生3D表示(如点云和体素)的生成模型迅速兴起。然而,当前主流方法主要依赖图像输入,易受单视角遮挡、光照干扰,导致几何准确性不足;同时难以精细调控比例、姿态和细节,且无法适应多模态输入,限制了在复杂场景中的实用性。 混元3D-Omni 基于混元3D 2.1开源模型构建,就像 “3D界的ControlNet”,通过轻量化的统一控制编码器和渐进式难度感知训练策略,混元 3D-Omni能融合多达四类控制条件,显著提升生成的可控性和质量: 骨骼:在单图条件下加入骨骼数据,能精确调节生成人物资产的姿态,完美适用于动画制作或虚拟角色设计; 点云:注入完整物体点云或从深度图投影的部分点云,帮助消除单张图像的视觉歧义,提升几何细节,让3D模型更逼真可靠; 边界框:允许微调生成资产的长宽高比例,确保结果与预期对齐; 体素:针对物体结构进行精确调节,让生成的3D资产在几何细节上满足需求。 <img src="https://static.l
ARTICLE
/
雷锋网
腾讯混元3D两大应用模型开源:3D生成迈入精准可控时代
2025年09月26日 18:24 · 来自 雷锋网