Langfuse

Langfuse

AI 平台

#46

开源的 LLM 工程平台，旨在帮助开发人员构建、监控和改进 AI 应用程序。它在一个统一的工作流程中提供追踪、提示管理、评估和分析。Langfuse 支持各种模型、框架和集成，使团队能够高效地从原型到生产。Langfuse 是一个开源的 LLM 工程平台，旨在帮助开发人员构建、监控和改进 AI 应用程序。它在一个统一的工作流程中提供追踪、提示管理、评估和分析。Langfuse 支持各种模型、框架和集成，使团队能够高效地从原型到生产。

DeepEval

AI GitHub 仓库

#91

开源框架，旨在评估大型语言模型（LLMs）。它允许开发者参与并改善评估过程，从而提升LLMs的性能和可靠性。DeepEval是一个开源框架，旨在评估大型语言模型（LLMs）。它允许开发者参与并改善评估过程，从而提升LLMs的性能和可靠性。

MLflow - 开源AI平台，适用于代理、LLM和模型

AI 框架

#13

开源AI平台，专为代理、LLM和机器学习模型设计。它使团队能够高效地调试、评估、监控和优化AI应用，适合各种规模的组织。MLflow是一个开源AI平台，专为代理、LLM和机器学习模型设计。它使团队能够高效地调试、评估、监控和优化AI应用，适合各种规模的组织。

Langtrace

AI 应用

#107

开源的可观测性和评估平台，旨在帮助开发人员将 AI 原型转化为企业级产品。它提供对 AI 代理性能、安全性和成本的洞察，支持主流框架和 LLM 提供商，实现无缝集成和迭代。Langtrace 是一个开源的可观测性和评估平台，旨在帮助开发人员将 AI 原型转化为企业级产品。它提供对 AI 代理性能、安全性和成本的洞察，支持主流框架和 LLM 提供商，实现无缝集成和迭代。

OpenLIT

AI 应用

#38

开源的 AI 工程平台，为 GenAI 和 LLM 应用提供可观测性。它提供基于 OpenTelemetry 的追踪、评估和提示管理功能。根据 Apache 2.0 许可证免费自托管，确保数据隐私和生产工作负载无供应商锁定。OpenLIT 是一个开源的 AI 工程平台，为 GenAI 和 LLM 应用提供可观测性。它提供基于 OpenTelemetry 的追踪、评估和提示管理功能。根据 Apache 2.0 许可证免费自托管，确保数据隐私和生产工作负载无供应商锁定。

TruLens 评估工具

AI GitHub 仓库

GitHub 项目，旨在评估和跟踪大型语言模型（LLMs）和 AI 代理的实验。它提供工具以有效评估性能并管理 AI 实验。TruLens 是一个 GitHub 项目，旨在评估和跟踪大型语言模型（LLMs）和 AI 代理的实验。它提供工具以有效评估性能并管理 AI 实验。

Radicalbit AI 监控

AI GitHub 仓库

全面的解决方案，用于监督生产中的 AI 模型。它提供工具以确保模型的性能和可靠性，对于依赖 AI 技术的企业至关重要。Radicalbit AI 监控是一个全面的解决方案，用于监督生产中的 AI 模型。它提供工具以确保模型的性能和可靠性，对于依赖 AI 技术的企业至关重要。

Phoenix

AI GitHub 仓库

#101

Arize Phoenix 是一款 AI 可观察性和评估工具，旨在帮助开发者监控和评估 AI 模型。它提供了模型性能的洞察，促进更好的决策和优化。