跳转到主要内容
ToolPotion
AI 顾问
提交(免费)

Plan2Explore

Plan2Explore 是一种自监督强化学习代理,旨在实现高效探索和快速适应新任务。它利用规划来在探索过程中寻找预期的未来新颖性,从而为下游任务实现零样本或少样本学习。在具有挑战性的控制任务上进行评估,其性能优于先前的方法。

查看仓库
分享
查看仓库
分享

强化学习(RL)代理在任务特定学习和样本效率方面常常面临挑战。Plan2Explore 通过引入一种新颖的自监督强化学习方法来解决这些限制。该代理旨在擅长探索并能快速适应新的、未见过且无先验知识的任务。

阅读更多

在其探索阶段,Plan2Explore 通过主动使用规划来发现新颖状态,从而区别于先前的方法。代理不是在到达观察后追溯评估观察的新颖性,而是策略性地寻找预期的未来新颖性。这种由规划驱动的探索可以实现更有效的数据收集和对环境更深入的理解。

在探索阶段之后,Plan2Explore 展现出卓越的适应性。它仅通过零次或几次任务特定的交互,就能快速微调以适应多种下游任务,例如站立、行走或奔跑。此功能显著减少了对大量任务特定训练数据和交互的需求,使其用途广泛。

该代理已在涉及高维图像输入的复杂控制任务上进行了严格评估。在这些评估中,Plan2Explore 即使在没有任何训练监督或任务特定奖励的情况下,其性能也优于现有的自监督探索方法。其性能非常接近拥有奖励访问权限的“神谕”代理,凸显了其有效性。

Plan2Explore 的架构允许它首先通过自监督探索学习一个全局世界模型,该模型独立于任何任务特定奖励。一旦建立了这个基础模型,代理就可以适应各种任务的不同奖励函数,展示了探索和利用学习的强大分离。

该项目提供了 Plan2Explore 在 Tensorflow 中的开源实现,可在 GitHub 上获取,鼓励在自监督强化学习领域进行进一步的研究和开发。此发布方便研究人员和从业人员轻松访问和构建 Plan2Explore 框架。

  • 类别其他 AI 工具
  • 定价模式开源
  • 部署云端, 自托管
  • 平台网页版

  • 自监督强化学习代理

  • 利用规划进行高效探索

  • 寻找预期的未来新颖性

  • 实现零样本或少样本任务适应

  • 在探索过程中学习全局世界模型

  • 处理高维图像输入

  • 性能优于先前自监督探索方法

  • 接近拥有奖励访问权限的“神谕”性能

  • 提供 Tensorflow 开源实现

  1. 访问模型:获取 Plan2Explore 代理实现。

  2. 设置环境:配置执行所需软件和硬件。

  3. 探索:以自监督方式运行代理以学习世界模型。

  4. 适应任务:提供奖励函数以微调代理以适应特定的下游任务。

  5. 通过 API 集成:利用提供的代码集成到自定义 RL 环境中。

  6. 优化:尝试调整参数以提高在目标任务上的性能。

  • 机器人控制
  • 游戏 AI
  • 自主系统
  • 强化学习研究
  • 模拟环境

Plan2Explore 评价

加载中...

与 Plan2Explore 类似的热门AI工具

Dreamer V3

AI 模型

Dreamer V3 是一种通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。

其他 AI 工具
查看工具

AI 模型

通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。Dreamer V3 是一种通用的强化学习算法,它学习环境模型来解决各种控制任务。它以单一配置在超过 150 个任务中表现出色,优于专用方法。该算法通过想象未来场景,实现跨领域的鲁棒学习,使人工智能在无需大量人类专业知识或实验的情况下得到广泛应用。

其他 AI 工具
查看 AI 模型 Top 5

TD3 PyTorch 实现

AI GitHub 仓库

该存储库提供了作者官方的 Twin Delayed Deep Deterministic Policy Gradients (TD3) PyTorch 实现。它专为 OpenAI Gym 环境中的连续控制任务而设计,为强化学习的研究和开发提供了强大的解决方案。

其他 AI 工具
查看工具

AI GitHub 仓库

该存储库提供了作者官方的 Twin Delayed Deep Deterministic Policy Gradients (TD3) PyTorch 实现。它专为 OpenAI Gym 环境中的连续控制任务而设计,为强化学习的研究和开发提供了强大的解决方案。

其他 AI 工具
查看 AI GitHub 仓库 Top 250

Voyager Embodied Agent

AI GitHub 仓库

Voyager 是一个用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。

AI 智能体构建工具
查看工具

AI GitHub 仓库

用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。Voyager 是一个用于 Minecraft 的开放式具身智能体,由大型语言模型驱动。它能够持续探索、学习技能并进行发现,无需人工干预。Voyager 利用自动课程、技能库和迭代提示来改进程序,展现出强大的终身学习能力。

AI 智能体构建工具
查看 AI GitHub 仓库 Top 250

OpenSpiel

AI GitHub 仓库

OpenSpiel 是一个用于游戏领域强化学习研究的综合性框架。它提供了一系列环境和算法,用于开发和测试各种类型游戏的通用 AI 代理,从简单的棋盘游戏到复杂的多智能体场景。它支持 C++ 和 Python 集成。

机器学习平台
查看工具

AI GitHub 仓库

用于游戏领域强化学习研究的综合性框架。它提供了一系列环境和算法,用于开发和测试各种类型游戏的通用 AI 代理,从简单的棋盘游戏到复杂的多智能体场景。它支持 C++ 和 Python 集成。OpenSpiel 是一个用于游戏领域强化学习研究的综合性框架。它提供了一系列环境和算法,用于开发和测试各种类型游戏的通用 AI 代理,从简单的棋盘游戏到复杂的多智能体场景。它支持 C++ 和 Python 集成。

机器学习平台
查看 AI GitHub 仓库 Top 250

Prime Agent

AI GitHub 仓库

Prime Agent 是一个自我改进的 RLM 代理,旨在增强编码工作流程并管理长期自主任务。它旨在通过自动化和自我改进能力来简化开发过程并提高效率。

AI 智能体构建工具

AI GitHub 仓库 排名第 192 位

查看工具

AI GitHub 仓库

自我改进的 RLM 代理,旨在增强编码工作流程并管理长期自主任务。它旨在通过自动化和自我改进能力来简化开发过程并提高效率。Prime Agent 是一个自我改进的 RLM 代理,旨在增强编码工作流程并管理长期自主任务。它旨在通过自动化和自我改进能力来简化开发过程并提高效率。

AI 智能体构建工具
AI GitHub 仓库 排名第 192 位

《强化学习:导论》是由理查德·S·萨顿和安德鲁·G·巴托撰写的强化学习综合指南。第二版扩展了关键算法和概念的覆盖范围,使其成为人工智能领域学生、研究人员和从业者的必备书籍。

其他 AI 工具
查看工具

《强化学习:导论》是由理查德·S·萨顿和安德鲁·G·巴托撰写的强化学习综合指南。第二版扩展了关键算法和概念的覆盖范围,使其成为人工智能领域学生、研究人员和从业者的必备书籍。

精选其他 AI 工具

RoboCat

AI 模型

RoboCat 是一种可自我改进的机器人 AI 代理,可学习在不同机器人手臂上执行各种任务。它只需 100 次演示即可适应新任务,并生成自己的训练数据以提高性能,从而加速机器人研究。

机器人与 AI 硬件
查看工具

AI 模型

可自我改进的机器人 AI 代理,可学习在不同机器人手臂上执行各种任务。它只需 100 次演示即可适应新任务,并生成自己的训练数据以提高性能,从而加速机器人研究。RoboCat 是一种可自我改进的机器人 AI 代理,可学习在不同机器人手臂上执行各种任务。它只需 100 次演示即可适应新任务,并生成自己的训练数据以提高性能,从而加速机器人研究。

机器人与 AI 硬件
查看 AI 模型 Top 5

Handful of Trials

AI GitHub 仓库

该代码仓库包含论文“Deep Reinforcement Learning in a Handful of Trials using Probabilistic Dynamics Models”的实验代码。它实现了 PETS 算法,将具备不确定性感知的深度网络动力学模型与基于采样的不确定性传播相结合,在强化学习任务中实现高效的样本学习。

AI 模型与大语言模型
查看工具

AI GitHub 仓库

该代码仓库包含论文“Deep Reinforcement Learning in a Handful of Trials using Probabilistic Dynamics Models”的实验代码。它实现了 PETS 算法,将具备不确定性感知的深度网络动力学模型与基于采样的不确定性传播相结合,在强化学习任务中实现高效的样本学习。

AI 模型与大语言模型
查看 AI GitHub 仓库 Top 250
1/8