跳转到主要内容
ToolPotion
AI 顾问
提交(免费)

World Models

World Models 是一个研究项目,探索用于强化学习环境的生成神经网络模型。它使智能体能够在由其自身世界模型生成的模拟“梦境”中学习,然后可以将这些学习转移到真实环境中。这种方法旨在创建更紧凑、更高效的策略。

查看模型
分享
查看模型
分享

World Models 致力于研究能够模拟强化学习环境的生成神经网络模型的创建。核心思想是构建一个“世界模型”,该模型学习环境的压缩空间和时间表示。然后,可以使用此模型生成一个“梦境”环境,供智能体进行训练。

阅读更多

通过使用从该世界模型提取的特征作为智能体的输入,研究人员可以训练一个显著更紧凑、更简单的策略来解决任务。一项关键创新是能够完全在由其世界模型生成的自身梦境环境中训练智能体,然后将此学习到的策略转移回实际环境。这种方法绕过了大量真实世界交互的需求,有可能加速学习并提高效率。

该系统包含三个主要组件:视觉(V)、记忆(M)和控制器(C)。V 组件,通常是变分自编码器(VAE),将高维观测(如图像)压缩成低维潜在向量。M 组件,通常是 MDN-RNN(混合密度网络循环神经网络),根据过去的信息和动作预测未来的潜在向量,有效地模拟了环境的时间动态。C 组件是一个简单的策略网络,它接收当前的潜在向量和 RNN 的隐藏状态来决定动作。

实验已在诸如从像素输入进行赛车等具有挑战性的任务中取得了成功,其中世界模型方法取得了最先进的结果。此外,研究还探索了完全在这些生成的“梦境”环境中训练智能体,如 VizDoom 实验所示,其中一个智能体学会了在模拟环境中生存,然后在实际环境中表现出色。这种方法提供了实际的好处,例如降低复杂环境中渲染和物理计算相关的计算成本,并能够在模拟空间中进行更广泛的训练。

  • 类别其他 AI 工具
  • 部署云端
  • 平台网页版

  • 用于 RL 环境的生成神经网络模型

  • 空间和时间表示的无监督学习

  • 在模拟“梦境”环境中训练智能体

  • 从模拟环境到真实环境的策略迁移

  • 环境状态的压缩表示

  • 紧凑且简单的策略学习

  • 用于视觉压缩的变分自编码器 (VAE)

  • 用于时间预测和环境模拟的 MDN-RNN

  • 用于动作选择的控制器 (C)

  • 赛车和 VizDoom 实验成功

  • 加速学习和提高效率的潜力

  • 减少对真实世界交互的需求

  1. 访问模型:获取 World Models 代码和模型。

  2. 设置环境:配置强化学习环境(例如,CarRacing-v0,VizDoom)。

  3. 训练世界模型:在环境数据上训练 VAE 和 MDN-RNN 组件。

  4. 训练控制器:使用世界模型生成的环境训练控制器策略。

  5. 迁移策略:将训练好的控制器部署到实际环境中。

  6. 迭代优化:对于复杂任务,使用迭代训练来改进世界模型和策略。

  • 强化学习
  • 机器人技术
  • 游戏 AI
  • 模拟训练
  • 策略优化
  • 预测建模

World Models 评价

加载中...

与 World Models 类似的热门AI工具

Dreamer V3

AI 模型

Dreamer V3 是一种通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。

其他 AI 工具
查看工具

AI 模型

通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。Dreamer V3 是一种通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。

其他 AI 工具
查看 AI 模型 Top 5

Genie 3 是一个开创性的 AI 模型,可以根据简单的文本描述生成逼真的环境。它允许用户实时探索这些互动世界,使其成为各种应用的强大工具,包括训练代理和教育模拟。

3D 模型生成器
查看工具

开创性的 AI 模型,可以根据简单的文本描述生成逼真的环境。它允许用户实时探索这些互动世界,使其成为各种应用的强大工具,包括训练代理和教育模拟。Genie 3 是一个开创性的 AI 模型,可以根据简单的文本描述生成逼真的环境。它允许用户实时探索这些互动世界,使其成为各种应用的强大工具,包括训练代理和教育模拟。

精选3D 模型生成器
查看 AI 模型 Top 5

此 GitHub 仓库包含“何时信任您的模型:基于模型的策略优化”论文的代码。它提供了基于模型的策略优化算法的实现,使研究人员和开发人员能够重现实验并在此基础上进行强化学习的研究。

AI 模型与大语言模型
查看工具

此 GitHub 仓库包含“何时信任您的模型:基于模型的策略优化”论文的代码。它提供了基于模型的策略优化算法的实现,使研究人员和开发人员能够重现实验并在此基础上进行强化学习的研究。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

Handful of Trials

AI GitHub 仓库

该代码仓库包含论文“Deep Reinforcement Learning in a Handful of Trials using Probabilistic Dynamics Models”的实验代码。它实现了 PETS 算法,将具备不确定性感知的深度网络动力学模型与基于采样的不确定性传播相结合,在强化学习任务中实现高效的样本学习。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

该代码仓库包含论文“Deep Reinforcement Learning in a Handful of Trials using Probabilistic Dynamics Models”的实验代码。它实现了 PETS 算法,将具备不确定性感知的深度网络动力学模型与基于采样的不确定性传播相结合,在强化学习任务中实现高效的样本学习。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250

Decision Transformer 将强化学习重构为序列建模问题,利用 GPT-x 和 BERT 等 Transformer 架构。它通过对期望回报、过去状态和动作进行条件化来生成最优动作,在 Atari、OpenAI Gym 和 Key-to-Door 任务上达到了最先进的性能。

AI 模型与大语言模型
查看工具

将强化学习重构为序列建模问题,利用 GPT-x 和 BERT 等 Transformer 架构。它通过对期望回报、过去状态和动作进行条件化来生成最优动作,在 Atari、OpenAI Gym 和 Key-to-Door 任务上达到了最先进的性能。Decision Transformer 将强化学习重构为序列建模问题,利用 GPT-x 和 BERT 等 Transformer 架构。它通过对期望回报、过去状态和动作进行条件化来生成最优动作,在 Atari、OpenAI Gym 和 Key-to-Door 任务上达到了最先进的性能。

AI 模型与大语言模型
查看 AI 模型 Top 5

Unity ML-Agents Toolkit

AI GitHub 仓库

Unity ML-Agents Toolkit 是一个开源项目,允许游戏和模拟作为训练智能体的环境,使用深度强化学习和模仿学习。它为开发者提供了一个创建 AI 驱动环境的平台。

AI 游戏开发工具游戏与电竞

AI GitHub 仓库 排名第 65 位

查看工具

AI GitHub 仓库

开源项目,允许游戏和模拟作为训练智能体的环境,使用深度强化学习和模仿学习。它为开发者提供了一个创建 AI 驱动环境的平台。Unity ML-Agents Toolkit 是一个开源项目,允许游戏和模拟作为训练智能体的环境,使用深度强化学习和模仿学习。它为开发者提供了一个创建 AI 驱动环境的平台。

AI 游戏开发工具游戏与电竞
AI GitHub 仓库 排名第 65 位

Voyager Embodied Agent

AI GitHub 仓库

Voyager 是一个用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。

AI 智能体构建工具
查看工具

AI GitHub 仓库

用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。Voyager 是一个用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。

AI 智能体构建工具
查看 AI GitHub 仓库 Top 250

Gato 是 Google DeepMind 开发的单一通用人工智能代理。它可以执行各种任务,包括玩 Atari 游戏、为图像添加字幕、聊天以及控制真实的机器人手臂。这种多模态代理使用 Transformer 神经网络来处理多样化的数据输入并生成适当的输出。

AI 模型与大语言模型
查看工具

Google DeepMind 开发的单一通用人工智能代理。它可以执行各种任务,包括玩 Atari 游戏、为图像添加字幕、聊天以及控制真实的机器人手臂。这种多模态代理使用 Transformer 神经网络来处理多样化的数据输入并生成适当的输出。Gato 是 Google DeepMind 开发的单一通用人工智能代理。它可以执行各种任务,包括玩 Atari 游戏、为图像添加字幕、聊天以及控制真实的机器人手臂。这种多模态代理使用 Transformer 神经网络来处理多样化的数据输入并生成适当的输出。

AI 模型与大语言模型
查看 AI 模型 Top 5
1/8