AI在线 AI在线

Direct3D-S2 横空出世!千兆级3D生成提速近10倍,AI建模进入新纪元!

近日,一款名为 Direct3D-S2的全新3D 生成框架引发了业界热议。 该框架通过创新的 空间稀疏注意力(SSA)机制,显著提升了高分辨率3D 图像生成的质量与效率,为千兆级3D 生成提供了更具可扩展性的解决方案。 AIbase 综合整理最新信息,带您深入了解 Direct3D-S2的技术突破与应用前景。

近日,一款名为 Direct3D-S2的全新3D 生成框架引发了业界热议。该框架通过创新的 空间稀疏注意力(SSA)机制,显著提升了高分辨率3D 图像生成的质量与效率,为千兆级3D 生成提供了更具可扩展性的解决方案。AIbase 综合整理最新信息,带您深入了解 Direct3D-S2的技术突破与应用前景。

image.png

空间稀疏注意力:效率与质量的双重飞跃

Direct3D-S2的核心创新在于其 空间稀疏注意力(SSA)机制,专为处理稀疏体视数据设计。该机制通过优化扩散变换器(DiT)的计算方式,显著降低了训练和推理的资源需求。据悉,SSA 机制使前向传播速度提升3.9倍,反向传播速度提升9.6倍,极大缩短了生成高分辨率3D 模型的时间。相比传统方法,Direct3D-S2在保持高质量输出的同时,训练成本大幅降低,展现了卓越的效率优势。

统一稀疏体视格式:提升训练稳定性

Direct3D-S2采用了一种统一的 稀疏体视变分自编码器(VAE),在输入、潜在表示和输出阶段保持一致的稀疏体视格式。相较于依赖异构表示的传统3D VAE,这种设计显著提高了训练的稳定性和效率。得益于此,Direct3D-S2能够在1024³ 分辨率下进行训练,仅需8块 GPU,而传统方法通常需要32块 GPU 才能完成256³ 分辨率的训练,标志着千兆级3D 生成的实用性迈上新台阶。

生成质量超越业界标杆

Direct3D-S2在公开数据集上的测试表现令人瞩目,其生成质量不仅超越了现有最先进的3D 生成方法,还在细节捕捉和几何精度上表现出色。生成的3D 形状展现了更高的分辨率和更精细的表面细节,适用于虚拟现实、游戏开发、工业设计等多个领域。AIbase 观察到,Direct3D-S2的高分辨率生成能力有望为复杂3D 建模任务提供全新解决方案。

开源计划:赋能全球开发者

据最新消息,Direct3D-S2的代码和模型权重将在近期公开,具体时间预计在5月底之前。这一开源举措将进一步推动3D 生成技术在全球开发者社区中的普及与应用。尽管具体开源许可尚未明确,但业界对其开放性寄予厚望,期待其成为推动3D 内容创作的催化剂。

3D 生成的未来风向

Direct3D-S2的发布标志着高分辨率3D 生成技术的一次重大飞跃。其空间稀疏注意力机制和高效的训练框架不仅突破了传统方法的计算瓶颈,还为千兆级3D 生成提供了可扩展的解决方案。AIbase 认为,随着开源计划的推进,Direct3D-S2有望在虚拟现实、增强现实、影视制作等领域引发广泛应用,推动3D 内容创作进入更加高效和精细化的新时代。

结语

Direct3D-S2以其创新的空间稀疏注意力机制和高效的稀疏体视框架,为高分辨率3D 生成树立了新标杆。从显著提速的训练过程到超越业界的高质量输出,这款框架展现了3D 生成技术的无限可能。

项目地址:https://github.com/DreamTechAI/Direct3D-S2

相关资讯

3D 版 SORA 来了!DreamTech 推出全球首个原生 3D-DiT 大模型 Direct3D

2024 年 5 月,DreamTech 官宣了其高质量 3D 生成大模型 Direct3D,并公开了相关学术论文 Direct3D: Scalable Image-to-3D Generation via 3D Latent Diffusion Transformer。链接: 3D 大模型,通过采用 3D Diffusion Transformer (3D-DiT),解决了长期以来困扰行业的高质量三维内容生成难题。坚持原生 3D 技术路线并取得突破此前,3D AIGC 通常采用的技术路线是 2D-to-3D li
6/17/2024 3:25:00 PM
机器之心

调查:超72% 的企业选择 AI 工具时最看重易用性

根据最近的一项 CIO 报告,企业在人工智能(AI)领域的投资高达2.5亿美元,尽管在证明投资回报率(ROI)方面面临挑战。 商业领袖们正努力提高生产力,但新技术的集成往往需要重构现有应用、更新流程并激励员工学习,以适应现代商业环境。 QuickBlox 首席执行官 Nate MacLeitch 对136位高管进行了调查,以揭示 AI 采用的现实情况,探讨领导者的首要任务、主要担忧以及他们在2025年寻找可信工具的信息来源。
3/18/2025 10:02:00 AM
AI在线

可保护作品免遭 AI 训练,Adobe 推出 Content Authenticity 应用

Adobe 推出全新应用 Content Authenticity,用于保护创意工作者的作品署名权,即使有人截屏并在网络二次传播也不受影响。这款网页应用于今日面向公众开放测试,用户上传需要保护的图像,应用就能嵌入隐形元数据和添加“禁止 AI 训练”标签,帮助确认作品归属和保护作品免遭 AI 训练。
4/24/2025 9:32:18 PM
准泽(实习)
  • 1