lai-harness

DeepEval

AI GitHub 仓库

#82

开源框架，旨在评估大型语言模型（LLMs）。它允许开发者参与并改善评估过程，从而提升LLMs的性能和可靠性。DeepEval是一个开源框架，旨在评估大型语言模型（LLMs）。它允许开发者参与并改善评估过程，从而提升LLMs的性能和可靠性。

大型语言模型的指导语言

AI GitHub 仓库

Guidance是一种旨在控制大型语言模型的语言。它提供了一种结构化的方法来管理和引导这些模型的输出，从而增强它们在各种应用中的实用性。

Langfuse

AI GitHub 仓库

#22

开源的AI工程平台，提供LLM评估、可观察性、指标、提示管理等功能。它与OpenTelemetry、LangChain和OpenAI SDK集成，为AI开发提供全面的工具包。Langfuse是一个开源的AI工程平台，提供LLM评估、可观察性、指标、提示管理等功能。它与OpenTelemetry、LangChain和OpenAI SDK集成，为AI开发提供全面的工具包。

Phoenix

AI GitHub 仓库

#87

Arize Phoenix 是一款 AI 可观察性和评估工具，旨在帮助开发者监控和评估 AI 模型。它提供了模型性能的洞察，促进更好的决策和优化。

Radicalbit AI 监控

AI GitHub 仓库

全面的解决方案，用于监督生产中的 AI 模型。它提供工具以确保模型的性能和可靠性，对于依赖 AI 技术的企业至关重要。Radicalbit AI 监控是一个全面的解决方案，用于监督生产中的 AI 模型。它提供工具以确保模型的性能和可靠性，对于依赖 AI 技术的企业至关重要。

旨在构建高质量 LLM 应用的工具，促进从原型设计到生产部署和监控的过程。它旨在简化语言模型应用的开发，确保在整个生命周期内的效率和质量。PromptFlow 是一个旨在构建高质量 LLM 应用的工具，促进从原型设计到生产部署和监控的过程。它旨在简化语言模型应用的开发，确保在整个生命周期内的效率和质量。

MLflow - 开源AI平台，适用于代理、LLM和模型

AI 框架

#12

开源AI平台，专为代理、LLM和机器学习模型设计。它使团队能够高效地调试、评估、监控和优化AI应用，适合各种规模的组织。MLflow是一个开源AI平台，专为代理、LLM和机器学习模型设计。它使团队能够高效地调试、评估、监控和优化AI应用，适合各种规模的组织。

Langfuse

AI 平台

#51

开源的 LLM 工程平台，旨在帮助开发人员构建、监控和改进 AI 应用程序。它在一个统一的工作流程中提供追踪、提示管理、评估和分析。Langfuse 支持各种模型、框架和集成，使团队能够高效地从原型到生产。Langfuse 是一个开源的 LLM 工程平台，旨在帮助开发人员构建、监控和改进 AI 应用程序。它在一个统一的工作流程中提供追踪、提示管理、评估和分析。Langfuse 支持各种模型、框架和集成，使团队能够高效地从原型到生产。