今日应用
今日话题
3D 版 SORA 来了！DreamTech 推出全球首个原生 3D-DiT 大模型 Direct3D
重点标签 Direct3D、3D生成、AIGC、DreamTech、3D技术
文章摘要
DreamTech公司在2024年5月宣布了其创新的3D生成大模型Direct3D，并发布了相应的学术论文。Direct3D是首个采用3D Diffusion Transformer (3D-DiT)技术的原生三维生成模型，它解决了以往高质量三维内容生成的难题。与以往2D图像模型升维到3D模型的技术路线相比，Direct3D的原生3D技术路线避免了2D升维的缺陷，提供了高质量、无畸形、无残缺、可商用的3D内容生成潜力。
Direct3D模型在技术实现上取得了三大突破：首先，D3D-VAE技术通过Variational Auto-Encoder提取3D数据的latent feature，显著降低了3D数据表征的复杂度；其次，D3D-DiT架构对原始DiT进行了改进，引入了语义级与像素级对齐模块，提高了输出模型与输入图像的对齐度；最后，DreamTech 3D数据引擎通过自研的数据合成技术，积累了超过2000万的高质量3D数据，为模型训练提供了强大的数据支持。
Direct3D的技术架构符合并验证了Scaling Law，即随着参数量和训练数据的增加，模型的智能程度将极大提高。DreamTech团队计划在年底前推出15B参数的Direct3D-XL，并增加5倍以上的高质量3D训练数据，预示着3D生成领域的新里程碑。
Direct3D的推出标志着3D生成领域进入了商用时代。与以往的技术方案相比，Direct3D生成的3D模型在几何结构、模型精度、表面细节、mesh面片数量等方面都有显著提升，满足了商业使用的需求。预计到2025年底，3D生成将在游戏、动漫、影视建模等行业实现大规模应用。
DreamTech公司还推出了基于Direct3D大模型的两款产品：Animeit!和3D内容创作平台。Animeit!可以将用户输入的图片或文字转换为二次元风格的3D人物形象，而3D内容创作平台则允许用户通过文本描述快速获得高质量3D模型。DreamTech致力于通过AI技术提升AIGC创作者和消费者的体验，并朝着实现通用人工智能(AGI)的目标迈进。
文章来源
原文地址: 点我阅读全文
原文作者: 机器之心
相关文章
