Maxim AI：GenAI 评估平台

Arize

AI 平台

#77

提供了一个统一的平台，用于 LLM 可观察性和代理评估，旨在改进从开发到生产的 AI 应用程序。它提供代理跟踪、评估和监控工具，使团队能够有效地构建、调试和优化 AI 代理。该平台支持数据驱动的迭代周期。Arize AI 提供了一个统一的平台，用于 LLM 可观察性和代理评估，旨在改进从开发到生产的 AI 应用程序。它提供代理跟踪、评估和监控工具，使团队能够有效地构建、调试和优化 AI 代理。该平台支持数据驱动的迭代周期。

LangWatch

AI 应用

#14

AI 代理测试、LLM 评估和可观测性平台。它允许开发人员模拟真实世界场景，防止回归，并通过将生产跟踪转化为评估来调试问题。通过在部署前测试提示、模型和代理来提高每次发布的 AI 质量。LangWatch 是一个 AI 代理测试、LLM 评估和可观测性平台。它允许开发人员模拟真实世界场景，防止回归，并通过将生产跟踪转化为评估来调试问题。通过在部署前测试提示、模型和代理来提高每次发布的 AI 质量。

HoneyHive

AI 应用

#33

生产环境中的 AI 代理提供可观测性层，统一监控和评估。它支持持续改进循环，使团队能够自信地交付高质量的代理。该平台提供分布式跟踪、在线评估、会话回放和警报，用于可扩展的代理行为监控。HoneyHive 为生产环境中的 AI 代理提供可观测性层，统一监控和评估。它支持持续改进循环，使团队能够自信地交付高质量的代理。该平台提供分布式跟踪、在线评估、会话回放和警报，用于可扩展的代理行为监控。

Teammately | 面向 AI 工程师的 AI 助手

AI 智能体

专为 AI 工程师设计的 AI 助手，用于构建可靠的 AI 服务。它通过生成提示、优化 AI 模型和评估性能来自动化和加速 AI 开发。该平台提供诸如基于 Agent 的 RAG 构建、AI 生成的文档和多维 LLM 评估器等功能。Teammately 是一款专为 AI 工程师设计的 AI 助手，用于构建可靠的 AI 服务。它通过生成提示、优化 AI 模型和评估性能来自动化和加速 AI 开发。该平台提供诸如基于 Agent 的 RAG 构建、AI 生成的文档和多维 LLM 评估器等功能。

Future AGI

AI 应用

#42

用于构建、测试和监控 AI 代理的开源平台。它通过护栏、使用 20 多个指标进行的全面评估以及类似 Sentry 的错误跟踪，帮助实时捕获和修复 AI 幻觉。该平台通过强化学习实现持续改进，并提供端到端的请求跟踪。Future AGI 是一个用于构建、测试和监控 AI 代理的开源平台。它通过护栏、使用 20 多个指标进行的全面评估以及类似 Sentry 的错误跟踪，帮助实时捕获和修复 AI 幻觉。该平台通过强化学习实现持续改进，并提供端到端的请求跟踪。

AgentOps

AI 平台

#99

提供了一个用于追踪、调试和部署可靠 AI 代理的平台。它提供会话回放、时间旅行调试以及完整的日志和错误数据追踪，使工程师能够自信地构建和扩展企业级代理，并进行成本控制。AgentOps 提供了一个用于追踪、调试和部署可靠 AI 代理的平台。它提供会话回放、时间旅行调试以及完整的日志和错误数据追踪，使工程师能够自信地构建和扩展企业级代理，并进行成本控制。

Comet - AI开发平台

AI 平台

#81

Opik的创造者，Opik是为开发者设计的端到端AI可观察性平台。它提供先进的代理测试、优化和监控功能，以增强开发过程并改善AI模型性能。Comet是Opik的创造者，Opik是为开发者设计的端到端AI可观察性平台。它提供先进的代理测试、优化和监控功能，以增强开发过程并改善AI模型性能。

Arize Phoenix 是一个开源的 AI 开发平台，旨在用于代理的开发和评估。它提供了追踪、测量和改善 AI 代理质量的工具，适合希望提升其 AI 应用的 AI 工程师和组织。