Radicalbit AI Monitoring

TruLens 評価ツール

AI GitHub リポジトリ

大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。TruLensは、大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。

MLflow - エージェント、LLM、およびモデルのためのオープンソースAIプラットフォーム

AI フレームワーク

#13

エージェント、LLM、およびMLモデルのために設計されたオープンソースのAIプラットフォームです。チームがAIアプリケーションを効率的にデバッグ、評価、監視、最適化できるようにし、あらゆる規模の組織に適しています。MLflowは、エージェント、LLM、およびMLモデルのために設計されたオープンソースのAIプラットフォームです。チームがAIアプリケーションを効率的にデバッグ、評価、監視、最適化できるようにし、あらゆる規模の組織に適しています。

NannyML

AI GitHub リポジトリ

#116

デプロイ後のデータサイエンスに特化したPythonライブラリです。データサイエンティストがモデルのパフォーマンスをデプロイ後に監視・分析し、信頼性と正確性を確保するのに役立ちます。NannyMLは、デプロイ後のデータサイエンスに特化したPythonライブラリです。データサイエンティストがモデルのパフォーマンスをデプロイ後に監視・分析し、信頼性と正確性を確保するのに役立ちます。

llamafile

AI GitHub リポジトリ

#141

大規模言語モデル（LLM）の配布と実行を単一のファイルで簡素化するために設計されたツールです。これは、GitHub上のMozilla AIコミュニティ内でのコラボレーションと開発を促進します。Llamafileは、大規模言語モデル（LLM）の配布と実行を単一のファイルで簡素化するために設計されたツールです。これは、GitHub上のMozilla AIコミュニティ内でのコラボレーションと開発を促進します。

BentoML

AI GitHub リポジトリ

#109

AIモデルとアプリケーションのデプロイを簡素化するために設計されたオープンソースプラットフォームです。開発者は、モデル推論APIを構築し、ジョブキューを管理し、マルチモデルパイプラインを効率的に作成することができ、AIデプロイメントをアクセスしやすく、スムーズにします。BentoMLは、AIモデルとアプリケーションのデプロイを簡素化するために設計されたオープンソースプラットフォームです。開発者は、モデル推論APIを構築し、ジョブキューを管理し、マルチモデルパイプラインを効率的に作成することができ、AIデプロイメントをアクセスしやすく、スムーズにします。

Langfuse

AI GitHub リポジトリ

#28

LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。Langfuseは、LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。

Wallaroo.ai

AI プラットフォーム

#147

機械学習モデルのデプロイ、管理、監視のためのツールを提供するAIプラットフォームです。MLOpsライフサイクルを簡素化し、チームがより迅速かつ自信を持ってAIを本番環境に導入できるようにすることを目指しています。このプラットフォームは、さまざまなモデルタイプをサポートし、既存のワークフローと統合されます。Wallaroo.aiは、機械学習モデルのデプロイ、管理、監視のためのツールを提供するAIプラットフォームです。MLOpsライフサイクルを簡素化し、チームがより迅速かつ自信を持ってAIを本番環境に導入できるようにすることを目指しています。このプラットフォームは、さまざまなモデルタイプをサポートし、既存のワークフローと統合されます。

Phoenix

AI GitHub リポジトリ

#101

Arize Phoenixは、開発者がAIモデルを監視し評価するのを支援するために設計されたAIの可観測性と評価ツールです。モデルのパフォーマンスに関する洞察を提供し、より良い意思決定と最適化を可能にします。