lai-harness

DeepEval

AI GitHub リポジトリ

#82

大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。DeepEvalは、大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。

LLM用ガイダンス言語

AI GitHub リポジトリ

ガイダンスは、大規模言語モデルを制御するために設計された言語です。これにより、これらのモデルの出力を管理し、指示するための構造化されたアプローチが提供され、さまざまなアプリケーションでの有用性が向上します。

Langfuse

AI GitHub リポジトリ

#22

LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。Langfuseは、LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。

Phoenix

AI GitHub リポジトリ

#87

Arize Phoenixは、開発者がAIモデルを監視し評価するのを支援するために設計されたAIの可観測性と評価ツールです。モデルのパフォーマンスに関する洞察を提供し、より良い意思決定と最適化を可能にします。

Radicalbit AI Monitoring

AI GitHub リポジトリ

運用中のAIモデルを監視するための包括的なソリューションです。モデルのパフォーマンスと信頼性を確保するためのツールを提供し、AI技術に依存する企業にとって不可欠です。Radicalbit AI Monitoringは、運用中のAIモデルを監視するための包括的なソリューションです。モデルのパフォーマンスと信頼性を確保するためのツールを提供し、AI技術に依存する企業にとって不可欠です。

高品質なLLMアプリケーションを構築するために設計されたツールで、プロトタイピングから本番展開、監視までのプロセスを容易にします。言語モデルアプリケーションの開発を効率化し、ライフサイクル全体を通じて効率性と品質を確保することを目的としています。PromptFlowは、高品質なLLMアプリケーションを構築するために設計されたツールで、プロトタイピングから本番展開、監視までのプロセスを容易にします。言語モデルアプリケーションの開発を効率化し、ライフサイクル全体を通じて効率性と品質を確保することを目的としています。

MLflow - エージェント、LLM、およびモデルのためのオープンソースAIプラットフォーム

AI フレームワーク

#12

エージェント、LLM、およびMLモデルのために設計されたオープンソースのAIプラットフォームです。チームがAIアプリケーションを効率的にデバッグ、評価、監視、最適化できるようにし、あらゆる規模の組織に適しています。MLflowは、エージェント、LLM、およびMLモデルのために設計されたオープンソースのAIプラットフォームです。チームがAIアプリケーションを効率的にデバッグ、評価、監視、最適化できるようにし、あらゆる規模の組織に適しています。

Langfuse

AI プラットフォーム

#51

開発者がAIアプリケーションを構築、監視、改善するのに役立つように設計された、オープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価、分析を統合されたワークフローで提供します。Langfuseは、さまざまなモデル、フレームワーク、および統合をサポートしており、チームがプロトタイプから本番環境へと効率…Langfuseは、開発者がAIアプリケーションを構築、監視、改善するのに役立つように設計された、オープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価、分析を統合されたワークフローで提供します。Langfuseは、さまざまなモデル、フレームワーク、および統合をサポートしており、チームがプロトタイプから本番環境へと効率…