麦享科技10月23日消息,今天,字节跳动Seed团队推出3D生成大模型——Seed3D 1.0,实现从单张图像到高质量仿真级3D模型的端到端生成。
Seed3D 1.0基于创新的Diffusion Transformer架构,通过大规模数据训练完成,可生成包括精细几何、真实纹理和基于物理渲染(PBR)材质的完整3D模型。
通过Seed3D 1.0生成的3D模型能够无缝导入Isaac Sim等仿真引擎,仅需少量适配工作即可支持具身智能大模型训练。
此外,通过分步的场景生成,Seed3D 1.0可从单个物体生成,拓展至构建完整的3D场景。
在与现有3D生成模型的对比中,Seed3D 1.0展现出优势:其纹理与材质生成性能超过此前的开源及闭源模型,几何生成性能超过业界更大参数规模的模型,综合能力达到行业领先水平。
目前Seed3D 1.0技术报告已公开,API也已上线,可访问项目主页查看:项目主页、体验入口
Seed3D 1.0采用生成式AI广泛应用的模型架构Diffusion Transformer,来设计3D几何生成和纹理贴图模型。
采用分步生成策略,Seed3D 1.0还可从生成单一物体拓展至生成完整、连贯的3D场景。
根据实测,Seed3D 1.0几何生成参数更少,效果更优;纹理材质生成的图像保持性领先。