OpenAI发布Shap-E模型 支持让文本或图像转换成3D对象

来源:网界网 | 2023-05-09 11:26:59

  OpenAI推出了Shap-E模型,这是一个生成3D对象的模型,您可以在Microsoft Paint 3D中打开,甚至支持在3D打印机转换成STL文件。

  Shap-E模型可在GitHub上免费获得,并支持在 PC 上本地运行。下载完所有文件和模型后,就不需要联网了。最重要的是,它不需要OpenAI API密钥,因此您无需为使用它付费。

  Shap-E模型能够制作细粒度纹理和复杂,详细的形状。虽然Point-E根据文本提示生成3D点云,但Shap-E直接创建对象的轮廓,并采用称为神经辐射场(NeRF)的特征来克服早期模型的模糊性。NeRF与虚拟现实和增强现实中使用的技术相同,使三维场景看起来像逼真的环境。Shap-E将该技术应用于更常见的扩散模型,以制作文本提示建议的物体的形状和纹理。该过程也比 Point-E 快得多。顶部集合中的每个 Shap-E 样本在单个 NVIDIA V13 GPU 上生成大约需要 100 秒,Point-E 将花费多达两分钟的时间在同一硬件上渲染。

  “我们发现沙普·E匹配或优于给定相同数据集,模型架构和训练计算的类似显式生成模型,”研究人员解释说。“我们还发现,我们的纯文本条件模型可以生成多样化、有趣的对象,而无需依赖图像作为中间表示。这些结果突出了生成隐式表示的潜力,特别是在像3D这样的领域,它们可以提供比显式表示更大的灵活性。”

  Shap-E的开发人员承认,与Point-E的点云方法相比,大规模使用的计算能力可能相当高。人工智能仍然在努力理解如何制作一些复杂的物体,但总体结果在他们的成功中是显着的。

相关阅读

每日精选