Evidently AI - 开源AI评估

Langtrace

AI 应用

#103

开源的可观测性和评估平台，旨在帮助开发人员将 AI 原型转化为企业级产品。它提供对 AI 代理性能、安全性和成本的洞察，支持主流框架和 LLM 提供商，实现无缝集成和迭代。Langtrace 是一个开源的可观测性和评估平台，旨在帮助开发人员将 AI 原型转化为企业级产品。它提供对 AI 代理性能、安全性和成本的洞察，支持主流框架和 LLM 提供商，实现无缝集成和迭代。

Deepchecks LLM 评估

AI 应用

#88

企业级的人工智能测试、可观察性和监控平台。它提供了对生产中人工智能系统的可见性、控制和信任，确保人工智能部署的准确性和一致性。Deepchecks LLM 评估是一个企业级的人工智能测试、可观察性和监控平台。它提供了对生产中人工智能系统的可见性、控制和信任，确保人工智能部署的准确性和一致性。

Future AGI

AI 应用

#41

用于构建、测试和监控 AI 代理的开源平台。它通过护栏、使用 20 多个指标进行的全面评估以及类似 Sentry 的错误跟踪，帮助实时捕获和修复 AI 幻觉。该平台通过强化学习实现持续改进，并提供端到端的请求跟踪。Future AGI 是一个用于构建、测试和监控 AI 代理的开源平台。它通过护栏、使用 20 多个指标进行的全面评估以及类似 Sentry 的错误跟踪，帮助实时捕获和修复 AI 幻觉。该平台通过强化学习实现持续改进，并提供端到端的请求跟踪。

OpenLIT

AI 应用

#38

开源的 AI 工程平台，为 GenAI 和 LLM 应用提供可观测性。它提供基于 OpenTelemetry 的追踪、评估和提示管理功能。根据 Apache 2.0 许可证免费自托管，确保数据隐私和生产工作负载无供应商锁定。OpenLIT 是一个开源的 AI 工程平台，为 GenAI 和 LLM 应用提供可观测性。它提供基于 OpenTelemetry 的追踪、评估和提示管理功能。根据 Apache 2.0 许可证免费自托管，确保数据隐私和生产工作负载无供应商锁定。

Opik by Comet

AI 应用

开源的 AI 可观察性平台，帮助开发者测试、发布并持续改进智能系统。它提供有效评估和监控大型语言模型 (LLM) 应用的工具。Opik 是一个开源的 AI 可观察性平台，帮助开发者测试、发布并持续改进智能系统。它提供有效评估和监控大型语言模型 (LLM) 应用的工具。

LangWatch

AI 应用

#14

AI 代理测试、LLM 评估和可观测性平台。它允许开发人员模拟真实世界场景，防止回归，并通过将生产跟踪转化为评估来调试问题。通过在部署前测试提示、模型和代理来提高每次发布的 AI 质量。LangWatch 是一个 AI 代理测试、LLM 评估和可观测性平台。它允许开发人员模拟真实世界场景，防止回归，并通过将生产跟踪转化为评估来调试问题。通过在部署前测试提示、模型和代理来提高每次发布的 AI 质量。

TruLens：AI代理的评估与追踪

AI 应用

#62

TruLens是一个开源库，用于评估和追踪AI代理。它使用OpenTelemetry对代理进行仪表化，利用LLM评审对步骤进行评分，并识别出最佳版本进行发布。TruLens帮助发现故障并优化成本，而不牺牲质量。

Helicone AI Gateway

AI 应用

#9

LLMOps 平台，专为构建可靠的 AI 应用而设计。它提供路由、调试和分析功能，使开发人员能够有效地监控和管理其 AI 模型。Helicone 受到快速发展的 AI 公司的信赖，并提供免费试用，帮助您构建强大的 AI 解决方案。Helicone 是一个 LLMOps 平台，专为构建可靠的 AI 应用而设计。它提供路由、调试和分析功能，使开发人员能够有效地监控和管理其 AI 模型。Helicone 受到快速发展的 AI 公司的信赖，并提供免费试用，帮助您构建强大的 AI 解决方案。