Sentry

Giskard OSS

AI GitHub リポジトリ

#109

LLMエージェントのために設計されたオープンソースの評価およびテストライブラリです。言語モデルの性能を評価し改善するためのツールを提供し、堅牢で信頼性の高いAIアプリケーションを確保します。Giskard OSSは、LLMエージェントのために設計されたオープンソースの評価およびテストライブラリです。言語モデルの性能を評価し改善するためのツールを提供し、堅牢で信頼性の高いAIアプリケーションを確保します。

DeepEval

AI GitHub リポジトリ

#90

大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。DeepEvalは、大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。

DeepTeam フレームワーク

AI GitHub リポジトリ

#122

大規模言語モデル（LLM）およびAIエージェントのレッドチーミングを目的としたフレームワークであり、AIシステムの堅牢性とセキュリティをテストし、向上させるための体系的なアプローチを提供します。DeepTeamは、大規模言語モデル（LLM）およびAIエージェントのレッドチーミングを目的としたフレームワークであり、AIシステムの堅牢性とセキュリティをテストし、向上させるための体系的なアプローチを提供します。

TruLens 評価ツール

AI GitHub リポジトリ

大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。TruLensは、大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。

StableLM

AI GitHub リポジトリ

Stability AI によって開発されたオープンソースの言語モデルシリーズです。この GitHub リポジトリは継続的な開発をホストしており、StableLM-3B-4E1T や StableLM-Alpha v2 などの様々なチェックポイントへのアクセスを提供します。高度な AI…StableLM は、Stability AI によって開発されたオープンソースの言語モデルシリーズです。この GitHub リポジトリは継続的な開発をホストしており、StableLM-3B-4E1T や StableLM-Alpha v2 などの様々なチェックポイントへのアクセスを提供します。高度な AI…

LangWatch

AI アプリ

#15

AIエージェントのテスト、LLM評価、オブザーバビリティプラットフォームです。開発者は、本番環境のトレースを評価に変換することで、現実世界のシナリオをシミュレートし、リグレッションを防ぎ、問題をデバッグできます。デプロイ前にプロンプト、モデル、エージェントをテストして、リリースごとにAIの品質を向上させます。LangWatchは、AIエージェントのテスト、LLM評価、オブザーバビリティプラットフォームです。開発者は、本番環境のトレースを評価に変換することで、現実世界のシナリオをシミュレートし、リグレッションを防ぎ、問題をデバッグできます。デプロイ前にプロンプト、モデル、エージェントをテストして、リリースごとにAIの品質を向上させます。

Promptfoo AI テストツール

AI GitHub リポジトリ

#78

AIプロンプト、エージェント、およびリトリーバル拡張生成（RAG）のテスト用ツールです。AIのレッドチーミング、ペンテスト、および脆弱性スキャンを提供し、GPT、Claudeなどのモデル間でパフォーマンスを比較します。コマンドラインおよびCI/CDシステムと統合されています。Promptfooは、AIプロンプト、エージェント、およびリトリーバル拡張生成（RAG）のテスト用ツールです。AIのレッドチーミング、ペンテスト、および脆弱性スキャンを提供し、GPT、Claudeなどのモデル間でパフォーマンスを比較します。コマンドラインおよびCI/CDシステムと統合されています。

BetterPrompt テストスイート

AI GitHub リポジトリ

LLMプロンプトを評価するために設計されたテストスイートです。開発者がGitHubでプロンプトテスト機能を向上させるために貢献できるようにし、プロンプト開発におけるコラボレーションと改善を促進します。BetterPromptは、LLMプロンプトを評価するために設計されたテストスイートです。開発者がGitHubでプロンプトテスト機能を向上させるために貢献できるようにし、プロンプト開発におけるコラボレーションと改善を促進します。