跳转到主要内容
ToolPotion
AI 顾问
提交(免费)

DM-GAN

DM-GAN 是用于文本到图像合成的动态记忆生成对抗网络的 PyTorch 实现。该存储库提供了基于 CVPR2019 论文的代码、预训练模型和评估脚本,用于从文本描述生成图像。

查看仓库
分享
查看仓库
分享

GitHub 上的 DM-GAN 存储库提供了动态记忆生成对抗网络(DM-GAN)的 PyTorch 实现,用于文本到图像合成,正如 CVPR2019 论文“DM-GAN: Dynamic Memory Generative Adversarial Networks for Text-to-Image Synthesis”中所述。该项目为研究人员和开发人员提供了复制和扩展 DM-GAN 模型所需的代码。

阅读更多

该存储库包含有关设置环境、下载数据集(鸟类和 COCO)以及获取 DAMSM 编码器和 DM-GAN 本身的预训练模型的全面说明。用户可以在自定义数据集上训练模型,或利用提供的预训练权重立即使用。

主要功能包括生成与文本描述精确匹配的高质量图像。该项目支持鸟类和 COCO 数据集的训练和评估。它还提供了计算 Inception Score (IS) 和 Fréchet Inception Distance (FID) 的脚本,这些是评估生成模型的关键指标。论文中的性能指标,包括 PyTorch 和 TensorFlow 实现的 R-precision、IS 和 FID 分数,都已记录在案,便于直接比较。

该存储库的目标受众包括对生成对抗网络、文本到图像合成以及用于图像生成的深度学习感兴趣的 AI 研究人员、机器学习工程师和计算机视觉从业人员。该项目在 MIT 许可下的开源性质鼓励了该领域的协作和进一步发展。

其价值主张在于提供了一个文档齐全、易于访问的最新文本到图像合成模型的 PyTorch 实现,并附带了用于训练、评估和基准测试的资源。这有助于加速生成式 AI 的实验和创新。

  • 类别AI 模型与大语言模型
  • 定价模式开源
  • 部署云端, 自托管
  • 平台网页版

  • DM-GAN 的 PyTorch 实现

  • 文本到图像合成功能

  • 基于 CVPR2019 论文

  • 包含训练和评估代码

  • 提供 DAMSM 和 DM-GAN 的预训练模型

  • 支持鸟类和 COCO 数据集

  • 用于计算 Inception Score (IS) 的脚本

  • 用于计算 Fréchet Inception Distance (FID) 的脚本

  • 详细记录的性能指标

  • MIT 许可下的开源

  1. 设置环境:安装 Python 2.7、PyTorch 0.4、TensorFlow 和所需的库。

  2. 下载数据:获取鸟类和 COCO 的元数据,然后下载图像数据集。

  3. 下载预训练模型:获取鸟类和 COCO 的 DAMSM 编码器和 DM-GAN 模型。

  4. 训练模型:导航到代码目录并使用指定的配置运行训练脚本。

  5. 生成验证图像:使用评估配置文件生成图像。

  6. 评估性能:运行脚本计算生成图像的 Inception Score 和 FID。

  • 文本到图像合成
  • 生成模型研究
  • 图像生成基准测试
  • 创意内容生成
  • 深度学习实验

DM-GAN 评价

加载中...

与 DM-GAN 类似的热门AI工具

StyleGAN-XL

AI GitHub 仓库

StyleGAN-XL 是一个用于从大型、多样化数据集中生成高分辨率图像的 AI 模型。它扩展了 StyleGAN 架构,以提高图像合成质量和多样性。该项目提供了用于训练、生成样本以及执行图像反演和编辑的代码。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

用于从大型、多样化数据集中生成高分辨率图像的 AI 模型。它扩展了 StyleGAN 架构,以提高图像合成质量和多样性。该项目提供了用于训练、生成样本以及执行图像反演和编辑的代码。StyleGAN-XL 是一个用于从大型、多样化数据集中生成高分辨率图像的 AI 模型。它扩展了 StyleGAN 架构,以提高图像合成质量和多样性。该项目提供了用于训练、生成样本以及执行图像反演和编辑的代码。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

SNGAN Projection

AI GitHub 仓库

该 GitHub 存储库提供了条件图像生成的官方 Chainer 实现。它利用谱归一化和投影判别器来实现生成对抗网络 (GAN)。该项目包括在 ImageNet、狗和猫图像等数据集上进行训练、评估和生成图像的代码。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

该 GitHub 存储库提供了条件图像生成的官方 Chainer 实现。它利用谱归一化和投影判别器来实现生成对抗网络 (GAN)。该项目包括在 ImageNet、狗和猫图像等数据集上进行训练、评估和生成图像的代码。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

StyleSwin 是一种基于 Transformer 的生成对抗网络 (GAN),专为高分辨率图像生成而设计。它利用 Swin Transformer 和一种新颖的双注意力机制来平衡计算效率和建模能力,在高达 1024x1024 的分辨率下取得了卓越的成果。

AI 模型与大语言模型
查看工具

基于 Transformer 的生成对抗网络 (GAN),专为高分辨率图像生成而设计。它利用 Swin Transformer 和一种新颖的双注意力机制来平衡计算效率和建模能力,在高达 1024x1024 的分辨率下取得了卓越的成果。StyleSwin 是一种基于 Transformer 的生成对抗网络 (GAN),专为高分辨率图像生成而设计。它利用 Swin Transformer 和一种新颖的双注意力机制来平衡计算效率和建模能力,在高达 1024x1024 的分辨率下取得了卓越的成果。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

Kandinsky 2

AI GitHub 仓库

Kandinsky 2 是一个多语言文本到图像的潜在扩散模型。它提供高级的图像生成功能,包括文本到图像、图像到图像和图像修复。该模型支持 ControlNet 以增强图像生成控制,并利用强大的编码器来改进对文本和图像的理解,从而产生更具美感的输出。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

多语言文本到图像的潜在扩散模型。它提供高级的图像生成功能,包括文本到图像、图像到图像和图像修复。该模型支持 ControlNet 以增强图像生成控制,并利用强大的编码器来改进对文本和图像的理解,从而产生更具美感的输出。Kandinsky 2 是一个多语言文本到图像的潜在扩散模型。它提供高级的图像生成功能,包括文本到图像、图像到图像和图像修复。该模型支持 ControlNet 以增强图像生成控制,并利用强大的编码器来改进对文本和图像的理解,从而产生更具美感的输出。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

StyleCLIP

AI GitHub 仓库

StyleCLIP 是 StyleGAN 图像文本驱动操作的官方实现。它利用 StyleGAN 的生成能力和 CLIP 的视觉语言理解能力,通过文本提示实现直观的图像编辑。该项目提供了三种方法:潜在向量优化、潜在映射器和全局 StyleSpace 方向。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

StyleGAN 图像文本驱动操作的官方实现。它利用 StyleGAN 的生成能力和 CLIP 的视觉语言理解能力,通过文本提示实现直观的图像编辑。该项目提供了三种方法:潜在向量优化、潜在映射器和全局 StyleSpace 方向。StyleCLIP 是 StyleGAN 图像文本驱动操作的官方实现。它利用 StyleGAN 的生成能力和 CLIP 的视觉语言理解能力,通过文本提示实现直观的图像编辑。该项目提供了三种方法:潜在向量优化、潜在映射器和全局 StyleSpace 方向。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

LS-GAN

AI 模型

LS-GAN,即损失敏感生成对抗网络,是一个专注于推进GAN的项目。它引入了一种新颖的损失函数方法,旨在提高生成质量和稳定性。该项目提供了用于实现和试验LS-GAN及其变体的源代码。

AI 模型与大语言模型
查看工具

AI 模型

LS-GAN,即损失敏感生成对抗网络,是一个专注于推进GAN的项目。它引入了一种新颖的损失函数方法,旨在提高生成质量和稳定性。该项目提供了用于实现和试验LS-GAN及其变体的源代码。

AI 模型与大语言模型
查看 AI 模型 Top 5

LLaVA

AI GitHub 仓库

LLaVA 是一个视觉指令调优模型,结合了大型语言和视觉能力。其目标是达到 GPT-4V 级别的性能,实现多模态理解和交互。该项目为研究人员和开发者提供了代码、模型和资源。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

视觉指令调优模型,结合了大型语言和视觉能力。其目标是达到 GPT-4V 级别的性能,实现多模态理解和交互。该项目为研究人员和开发者提供了代码、模型和资源。LLaVA 是一个视觉指令调优模型,结合了大型语言和视觉能力。其目标是达到 GPT-4V 级别的性能,实现多模态理解和交互。该项目为研究人员和开发者提供了代码、模型和资源。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

StyleGAN3

AI 模型

StyleGAN3 引入了无别名(alias-free)的生成对抗网络,通过彻底改革生成器内的信号处理来实现。这项创新消除了“纹理粘连”现象,能够更连贯地合成视频和动画。该模型在实现 StyleGAN2 的 FID 分数的同时,提供了对平移和旋转的完全等变性,即使在亚像素尺度上也是如此。

AI 模型与大语言模型
查看工具

AI 模型

StyleGAN3 引入了无别名(alias-free)的生成对抗网络,通过彻底改革生成器内的信号处理来实现。这项创新消除了“纹理粘连”现象,能够更连贯地合成视频和动画。该模型在实现 StyleGAN2 的 FID 分数的同时,提供了对平移和旋转的完全等变性,即使在亚像素尺度上也是如此。

AI 模型与大语言模型
查看 AI 模型 Top 5
1/8