跳转到主要内容
ToolPotion

Virgil

Virgil 是一个开源的 AI 代理运行时控制器,充当本地边缘网关。它拦截对 OpenAI 和 Anthropic 等大型语言模型 (LLM) 提供者的调用,应用确定性的成本/安全策略,使用 SQLite 记录带有编辑的数据,并可选择将指标导出到控制平面。无需账户或 Docker。

查看仓库
分享

描述

Virgil 是一个为 AI 代理设计的开源运行时控制器,作为本地边缘网关运行。它拦截对大型语言模型 (LLM) 提供者(如 OpenAI、Anthropic 和 Kimi)的调用,应用确定性的成本和安全策略。这确保了 AI 操作在预定义参数内进行,从而提高了效率和安全性。

该工具使用 SQLite 记录带有编辑的遥测数据,提供了一种安全高效的数据管理方式。此外,Virgil 可以将指标导出到控制平面,为用户提供灵活性,以详细监控和分析 AI 操作。此功能对于希望在不妥协数据安全的情况下保持对 AI 活动的监督的组织尤其有益。

Virgil 旨在优先考虑本地操作,这意味着它主要在本地系统上运行,无需基于云的账户或 Docker 安装。这使得它易于访问和部署,特别适合那些重视数据隐私和对其 AI 操作控制的用户。

Virgil 的主要受众包括使用 AI 代理的开发者和组织,他们需要一个强大的系统来管理和监控 AI 交互。通过提供本地优先的解决方案,Virgil 提供了独特的价值主张,使用户能够在确保遵守安全和成本政策的同时,保持对其 AI 过程的控制。

总体而言,Virgil 作为一个多功能且安全的工具,突显了管理 AI 代理交互的能力,为希望优化其 AI 操作的组织提供了全面的解决方案。

Virgil的核心功能

  • 开源运行时控制

  • 本地边缘网关

  • 拦截 LLM 提供者调用

  • 应用成本/安全策略

  • 在 SQLite 中记录遥测

  • 将指标导出到控制平面

  • 本地优先操作

  • 无需账户或 Docker

Virgil入门

  1. 克隆:下载代码库

  2. 安装依赖:设置必要的包

  3. 配置:调整环境设置

  4. 执行:运行应用程序

  5. 优化:进行性能微调

Virgil的使用案例

  • AI 交互管理
  • 成本政策执行
  • 安全政策应用
  • 遥测记录
  • 指标导出

Virgil的常见问题

Virgil 评价

加载中...

与 Virgil 类似的热门AI工具

AGIS是一个用Go开发的通用自主AI代理。它具有单一二进制文件、SQLite+FTS5内存、多提供者LLM、技能和角色管理、工具策略保护,以及与Telegram和Discord的集成。

AI 智能体构建工具

AI GitHub 仓库

Hark 是一个自托管的 AI 聊天机器人,为每次交互提供详细的收据,显示触发的指令、API 响应、访问的数据和费用。它支持多个提供商,包括 OpenAI、Anthropic、Ollama 和 vLLM。

AI聊天机器人

AI 应用

一个开源的AI代理可观察性和监控平台,能够追踪生产中的代理,发现故障,并自动派遣编码代理进行修复。

精选MLOps 与模型部署

AI GitHub 仓库

Byte是一个自托管的AI代理,集成了本地LLM、工具调用、WASM沙箱和基于pgvector的混合RAG。它提供MCP和提示注入防御,为AI驱动的应用程序提供了一个强大的平台。

AI 智能体构建工具

AI GitHub 仓库

Nachalnik 是一个用 Rust 开发的透明代理运行时,专注于上下文、工具、权限和请求的显式状态管理。它包括一个 MCP 桥接和一个终端代理,增强了开发人员的控制和灵活性。

AI 智能体构建工具

AI GitHub 仓库

Kotys 是一个私人 AI 代理,旨在您的计算机上运行,提供聊天、工具、记忆和任务管理功能。它在 Ollama 上运行,既可以本地运行,也可以在云端运行,并且与任何 OpenAI 服务器(如 oMLX)兼容。

AI 智能体构建工具

AI 应用

Olivares AI 是一个自托管的、供应商中立的平台,用于集成、管理和保护在您自己的基础设施上运行的 AI 代理、模型和 MCP 服务器,涵盖 Claude、Codex、OpenAI、Gemini 和自托管模型。

MLOps 与模型部署

AI 应用

中间件是一个全栈的、原生于OpenTelemetry的可观察性平台,其AI SRE代理OpsAI能够检测、诊断并帮助解决基础设施、APM、日志、RUM和LLMs中的生产问题。

AI DevOps 与云工具