Shap-e logo

Shap-e

打开

Shap-E 是 OpenAI 开源的 MIT 许可研究模型,可根据文本或图像生成 3D 物体,方法见论文 arXiv 2305.02463。

分享:
查看替代方案

Shap-E 是 OpenAI 的研究模型,可根据文本或图像生成 3D 物体。官方的代码与模型发布在 openai/shap-e 仓库,采用 MIT 许可证,方法见论文 Shap-E: Generating Conditional 3D Implicit Functions。该仓库是代码发布,而不是托管产品。

核心功能

  • 文本生成 3D:根据文本提示采样 3D 物体。仓库示例包括"A chair that looks like an avocado"。
  • 图像生成 3D:根据合成视角图像采样 3D 物体。仓库建议先去掉输入图像的背景以获得更好的效果。
  • 模型编码:把 3D 模型或 trimesh 渲染成多视角图像和点云,编码为潜变量,再渲染回来。这需要 Blender 3.3.1 或更高版本,并设置 BLENDER_PATH 环境变量。
  • MIT 许可证:代码与发布内容可在 MIT 许可证下自由复用。

模型规格

规格 Shap-E
类型 条件式 3D 生成模型
输入 文本提示或图像
输出 3D 物体(隐式函数)
许可证 MIT
安装 在仓库中运行 pip install -e .
来源 github.com/openai/shap-e

仓库链接了模型卡和样例库,没有说明弃用,也没有归档提示。

适用场景

  • 根据文字描述快速勾勒 3D 概念。
  • 3D 生成与隐式表示方向的研究。
  • 在迁移到生产级 3D 服务之前做流水线原型。

快速开始

  1. 克隆 openai/shap-e 并运行 pip install -e .。
  2. 打开文本生成 3D 或图像生成 3D 的示例 notebook,用自己的提示词或图像采样。
  3. 导出结果并在 3D 查看器中检查。运行编码示例时,需要安装 Blender 并设置 BLENDER_PATH。

常见问题

Shap-E 是做什么的?

根据文本提示或图像生成 3D 物体。

Shap-E 是开源的吗?

是的。官方仓库采用 MIT 许可证。

Shap-E 能生成图片吗?

不能。它的输出是 3D 物体。生成静态图像请看 GPT Image 2。

有托管的 3D 服务吗?

Shap-E 只是代码发布。如果需要产品化的 3D 工作流,请看 Hyper3D Rodin。

替代方案

总结

Shap-E 是体量小、采用 MIT 许可证的文本生成 3D、图像生成 3D 实验入口。请从官方仓库和论文入手,更多工具见模型分类。

评论

还没有评论。成为第一个评论的人!