PlainBacktest

Promptfoo AI テストツール

AI GitHub リポジトリ

#78

AIプロンプト、エージェント、およびリトリーバル拡張生成（RAG）のテスト用ツールです。AIのレッドチーミング、ペンテスト、および脆弱性スキャンを提供し、GPT、Claudeなどのモデル間でパフォーマンスを比較します。コマンドラインおよびCI/CDシステムと統合されています。Promptfooは、AIプロンプト、エージェント、およびリトリーバル拡張生成（RAG）のテスト用ツールです。AIのレッドチーミング、ペンテスト、および脆弱性スキャンを提供し、GPT、Claudeなどのモデル間でパフォーマンスを比較します。コマンドラインおよびCI/CDシステムと統合されています。

Click

AI GitHub リポジトリ

Codex CLIおよびClaude Code用のオープンソースプラグインであり、AIコーディングエージェントが小さな編集の後に同じ合格テストを再実行および再読み込みするのを防ぎます。各検証チェックのために署名されたレシートを記録し、コード変更が実際に影響を与えるチェックを決定し、影響を受けないチェックの完全な出力を1行の再利用通知に置き換えま…Clickは、Codex CLIおよびClaude Code用のオープンソースプラグインであり、AIコーディングエージェントが小さな編集の後に同じ合格テストを再実行および再読み込みするのを防ぎます。各検証チェックのために署名されたレシートを記録し、コード変更が実際に影響を与えるチェックを決定し、影響を受けないチェックの完全な出力を1行の再利用通知に置き換えま…

Micro Agent

AI GitHub リポジトリ

#204

提供されたテストケースに基づいてコードを記述し、反復的に修正するAIツールです。テストをパスするコードの生成に重点を置き、手動での繰り返し作業を削減し、コード品質の向上を目指します。様々なLLMプロバイダーをサポートし、コマンドラインインターフェースと実験的なビジュアルマッチング機能の両方を提供します。Micro Agentは、提供されたテストケースに基づいてコードを記述し、反復的に修正するAIツールです。テストをパスするコードの生成に重点を置き、手動での繰り返し作業を削減し、コード品質の向上を目指します。様々なLLMプロバイダーをサポートし、コマンドラインインターフェースと実験的なビジュアルマッチング機能の両方を提供します。

Sentry

AI GitHub リポジトリ

テスト時にLLMエージェントの失敗から回復する方法を学ぶことに焦点を当てたGitHubプロジェクトです。テスト中の失敗ポイントに対処することで、言語モデルエージェントの堅牢性と信頼性を向上させることを目的としています。Sentryは、テスト時にLLMエージェントの失敗から回復する方法を学ぶことに焦点を当てたGitHubプロジェクトです。テスト中の失敗ポイントに対処することで、言語モデルエージェントの堅牢性と信頼性を向上させることを目的としています。

エージェンティックセキュリティフレームワークラボ

AI GitHub リポジトリ

エージェンティックAIシステムを構築、保護、評価、ベンチマークするためのフレームワークに依存しないプラットフォームです。LangGraph、LangChain、CrewAI、LlamaIndexなどのツールを統合し、決定論的な検証、評価、フォールバック、セキュリティコントロールを提供します。エージェンティックセキュリティフレームワークラボは、エージェンティックAIシステムを構築、保護、評価、ベンチマークするためのフレームワークに依存しないプラットフォームです。LangGraph、LangChain、CrewAI、LlamaIndexなどのツールを統合し、決定論的な検証、評価、フォールバック、セキュリティコントロールを提供します。

Tracely-ai

AI GitHub リポジトリ

#177

AIエージェントのためのトレースネイティブCI/CDツールです。生産トレースを評価し、失敗をクラスタリングし、それらを再生可能な回帰テストに変換します。このツールは回帰を引き起こすプルリクエストをブロックし、自己ホスティングが可能です。Tracely-aiはAIエージェントのためのトレースネイティブCI/CDツールです。生産トレースを評価し、失敗をクラスタリングし、それらを再生可能な回帰テストに変換します。このツールは回帰を引き起こすプルリクエストをブロックし、自己ホスティングが可能です。

インスペクター

AI GitHub リポジトリ

MCPサーバー向けに設計された視覚テストツールで、開発者がサーバー構成の正確性と信頼性を確保することを可能にします。包括的な視覚テストを通じて不一致やエラーを特定し、サーバーのパフォーマンスと安定性を向上させます。インスペクターは、MCPサーバー向けに設計された視覚テストツールで、開発者がサーバー構成の正確性と信頼性を確保することを可能にします。包括的な視覚テストを通じて不一致やエラーを特定し、サーバーのパフォーマンスと安定性を向上させます。

BaseRock AI

AI アプリ

#115

開発チームが機能テストとビジネスユースケーステストを自動化するのを支援する、エージェンティックQAおよびビジネステストソリューションを提供します。リスクを排除し、より迅速なリリースを実現し、コードが技術的にもビジネス的にも正しいことを保証し、顧客と収益の結果を検証することを目的としています。BaseRock AIは、開発チームが機能テストとビジネスユースケーステストを自動化するのを支援する、エージェンティックQAおよびビジネステストソリューションを提供します。リスクを排除し、より迅速なリリースを実現し、コードが技術的にもビジネス的にも正しいことを保証し、顧客と収益の結果を検証することを目的としています。