跳转到主要内容
ToolPotion
AI 顾问
提交(免费)

MVDream

MVDream 是一个用于多视图 3D 生成的扩散模型,构建于 Stable Diffusion 之上。它能够从不同视角创建多个 2D 图像,是生成 3D 资产的基础组件。该项目提供了扩散模型和 2D 图像生成代码。

查看仓库
分享
查看仓库
分享

MVDream 是一个由字节跳动开发的开源项目,托管在 GitHub 上,专注于用于 3D 生成的多视图扩散(Multi-view Diffusion)。该存储库包含了构成 MVDream 论文基础的扩散模型和 2D 图像生成代码。虽然此存储库提供了核心的扩散能力,但实际的 3D 生成由另一个独立项目 MVDream-threestudio 处理。

阅读更多

MVDream 的主要目的是根据文本提示生成一致的多视图图像。这种能力对于重建或生成 3D 模型至关重要,因为多个视图提供了必要的几何信息。该项目利用了扩散模型的强大功能,特别是构建在 Stable Diffusion 的架构和原理之上。

安装过程很简单,用户可以通过提供的 requirements 文件或将其安装为 Python 模块来设置环境。该项目提供了预训练模型,包括基于 Stable Diffusion 2.1 Base 和 Stable Diffusion 1.5 的版本,可在 Hugging Face 上获取。这些模型在 OpenRAIL 许可下分发。

用户可以直接通过命令行使用文本提示生成多视图图像。此外,还提供了一个 Gradio 脚本,用于交互式、基于 GUI 的体验。模型可以从 Hugging Face 自动加载,或通过配置文件和检查点文件手动加载。推理过程包括生成噪声、定义时间步长以及提供条件信息,如文本嵌入和相机参数。

MVDream 受到 Stable Diffusion 项目的启发并基于其构建,并感谢其作者的开源贡献。该项目的目标是通过提供易于访问且功能强大的多视图扩散工具来推动 3D 生成领域的研究和开发。

  • 类别3D 模型生成器
  • 定价模式开源
  • 部署云端, 自托管
  • 平台网页版

  • 从文本提示生成多视图图像

  • 扩散模型架构

  • 基于 Stable Diffusion

  • 提供 2D 图像生成代码

  • 支持 Stable Diffusion 2.1 Base 和 1.5 模型

  • 用于文本到图像生成的命令行界面

  • 用于 GUI 交互的 Gradio 脚本

  • 从 Hugging Face 自动加载模型

  • 通过配置文件和检查点文件手动加载模型

  • 模型采用 OpenRAIL 许可

  • 可选的 Python 模块安装方式

  1. 克隆:从 GitHub 克隆 MVDream 存储库。

  2. 安装:使用 `pip install -r requirements.txt` 或 `pip install -e .` 安装依赖项。

  3. 配置:选择并加载预训练模型(例如 `sd-v2.1-base-4view`)。

  4. 生成:运行文本到图像生成脚本(例如 `python scripts/t2i.py`)。

  5. 交互:使用 Gradio 应用进行 GUI 体验(`python scripts/gradio_app.py`)。

  6. 推理:使用自定义噪声、时间步长和条件进行模型推理。

  • 3D 资产生成
  • 多视图图像合成
  • 生成式 AI 研究
  • 计算机图形学管线
  • 虚拟现实内容
  • 增强现实内容

与 MVDream 类似的热门AI工具

Stable-DreamFusion

AI GitHub 仓库

Stable-DreamFusion 是文本到 3D 模型 DreamFusion 的 PyTorch 实现,利用 Stable Diffusion 进行 3D 内容生成。它支持文本到 3D、图像到 3D 和网格导出,通过 NeRF 和 Diffusion 技术提供灵活性。该项目使用户能够从各种输入创建 3D 资产。

3D 模型生成器
查看工具

AI GitHub 仓库

文本到 3D 模型 DreamFusion 的 PyTorch 实现,利用 Stable Diffusion 进行 3D 内容生成。它支持文本到 3D、图像到 3D 和网格导出,通过 NeRF 和 Diffusion 技术提供灵活性。该项目使用户能够从各种输入创建 3D 资产。Stable-DreamFusion 是文本到 3D 模型 DreamFusion 的 PyTorch 实现,利用 Stable Diffusion 进行 3D 内容生成。它支持文本到 3D、图像到 3D 和网格导出,通过 NeRF 和 Diffusion 技术提供灵活性。该项目使用户能够从各种输入创建 3D 资产。

3D 模型生成器
查看 AI GitHub 仓库 Top 250

LGM 是一个用于高分辨率 3D 内容创建的大型多视图高斯模型的官方实现。它能够从多视图图像生成详细的 3D 资产,并应用于文本到 3D 和图像到 3D 工作流程。该项目提供了代码、预训练权重和推理脚本。

3D 模型生成器
查看工具

用于高分辨率 3D 内容创建的大型多视图高斯模型的官方实现。它能够从多视图图像生成详细的 3D 资产,并应用于文本到 3D 和图像到 3D 工作流程。该项目提供了代码、预训练权重和推理脚本。LGM 是一个用于高分辨率 3D 内容创建的大型多视图高斯模型的官方实现。它能够从多视图图像生成详细的 3D 资产,并应用于文本到 3D 和图像到 3D 工作流程。该项目提供了代码、预训练权重和推理脚本。

3D 模型生成器
查看 AI GitHub 仓库 Top 250

Shap-E

AI GitHub 仓库

Shap-E 是 OpenAI 发布的一个开源 AI 模型,用于生成 3D 对象。它可以根据文本提示或输入图像来创建这些对象。该工具专为对 3D 内容生成和 AI 驱动设计感兴趣的开发者和研究人员而设计。

3D 模型生成器
查看工具

AI GitHub 仓库

OpenAI 发布的一个开源 AI 模型,用于生成 3D 对象。它可以根据文本提示或输入图像来创建这些对象。该工具专为对 3D 内容生成和 AI 驱动设计感兴趣的开发者和研究人员而设计。Shap-E 是 OpenAI 发布的一个开源 AI 模型,用于生成 3D 对象。它可以根据文本提示或输入图像来创建这些对象。该工具专为对 3D 内容生成和 AI 驱动设计感兴趣的开发者和研究人员而设计。

3D 模型生成器
查看 AI GitHub 仓库 Top 250

TripoSR

AI 应用

TripoSR 是一个基于人工智能的 3D 重建平台,可以在几秒钟内将 2D 图像和文本提示转换为高质量的 3D 模型,基于开源的 TripoSR 项目,面向创作者、开发者和研究人员。

3D 模型生成器

3D 模型生成器 排名第 34 位

查看工具

AI 应用

基于人工智能的 3D 重建平台,可以在几秒钟内将 2D 图像和文本提示转换为高质量的 3D 模型,基于开源的 TripoSR 项目,面向创作者、开发者和研究人员。TripoSR 是一个基于人工智能的 3D 重建平台,可以在几秒钟内将 2D 图像和文本提示转换为高质量的 3D 模型,基于开源的 TripoSR 项目,面向创作者、开发者和研究人员。

3D 模型生成器
3D 模型生成器 排名第 34 位

Tripo AI是一个免费的在线工具,可以在几秒钟内将文本提示或图像转换为高保真3D模型。非常适合游戏、3D打印和动画,它简化了各个技能水平用户的3D创作过程。

3D 模型生成器媒体与娱乐

AI 应用 排名第 104 位

查看工具

免费的在线工具,可以在几秒钟内将文本提示或图像转换为高保真3D模型。非常适合游戏、3D打印和动画,它简化了各个技能水平用户的3D创作过程。Tripo AI是一个免费的在线工具,可以在几秒钟内将文本提示或图像转换为高保真3D模型。非常适合游戏、3D打印和动画,它简化了各个技能水平用户的3D创作过程。

3D 模型生成器媒体与娱乐
AI 应用 排名第 104 位

Imagen3D

AI 应用

Imagen3D 是一款 AI 工具,可以在线将照片转换为 3D 模型,无需 3D 技能。它生成可查看、可分享的模型,具有 PBR 纹理,并可导出为 GLB、OBJ、STL 和 USDZ 格式,适用于电子商务、打印和内容创作。

3D 模型生成器

3D 模型生成器 排名第 45 位

查看工具

AI 应用

AI 工具,可以在线将照片转换为 3D 模型,无需 3D 技能。它生成可查看、可分享的模型,具有 PBR 纹理,并可导出为 GLB、OBJ、STL 和 USDZ 格式,适用于电子商务、打印和内容创作。Imagen3D 是一款 AI 工具,可以在线将照片转换为 3D 模型,无需 3D 技能。它生成可查看、可分享的模型,具有 PBR 纹理,并可导出为 GLB、OBJ、STL 和 USDZ 格式,适用于电子商务、打印和内容创作。

3D 模型生成器
3D 模型生成器 排名第 45 位

Next3D

AI 应用

一个AI 3D生成平台,运行多个前沿3D模型,并包括基于浏览器的查看器和文件工具包。为从图像或文本生成3D资产的创作者而构建。

3D 模型生成器媒体与娱乐

3D 模型生成器 排名第 32 位

查看工具

AI 应用

一个AI 3D生成平台,运行多个前沿3D模型,并包括基于浏览器的查看器和文件工具包。为从图像或文本生成3D资产的创作者而构建。

3D 模型生成器媒体与娱乐
3D 模型生成器 排名第 32 位

Magic3D 是一款用于高分辨率文本到 3D 内容创建的 AI 工具。它使用粗到精的扩散策略从文本提示生成详细的 3D 网格模型。该工具提供基于提示的编辑和图像条件设置,以增强控制和创意应用,从而产生更高质量的 3D 资产。

3D 模型生成器
查看工具

用于高分辨率文本到 3D 内容创建的 AI 工具。它使用粗到精的扩散策略从文本提示生成详细的 3D 网格模型。该工具提供基于提示的编辑和图像条件设置,以增强控制和创意应用,从而产生更高质量的 3D 资产。Magic3D 是一款用于高分辨率文本到 3D 内容创建的 AI 工具。它使用粗到精的扩散策略从文本提示生成详细的 3D 网格模型。该工具提供基于提示的编辑和图像条件设置,以增强控制和创意应用,从而产生更高质量的 3D 资产。

3D 模型生成器
查看 AI 模型 Top 5
1/8