Cua

DeepEval

AI GitHub リポジトリ

#80

大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。DeepEvalは、大規模言語モデル（LLM）を評価するために設計されたオープンソースのフレームワークです。開発者が評価プロセスに貢献し、LLMのパフォーマンスと信頼性を向上させることができます。

OpenAI Evals フレームワーク

AI GitHub リポジトリ

大規模言語モデル（LLM）およびLLMシステムを評価するために設計されたフレームワークです。AIモデルの性能と能力を評価するためのベンチマークのオープンソースレジストリとして機能します。OpenAI Evalsは、大規模言語モデル（LLM）およびLLMシステムを評価するために設計されたフレームワークです。AIモデルの性能と能力を評価するためのベンチマークのオープンソースレジストリとして機能します。

Langfuse

AI GitHub リポジトリ

#19

LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。Langfuseは、LLM評価、可観測性、メトリクス、プロンプト管理などを提供するオープンソースのAIエンジニアリングプラットフォームです。OpenTelemetry、LangChain、OpenAI SDKと統合されており、AI開発のための包括的なツールキットを提供します。

Feast Feature Store

AI GitHub リポジトリ

#89

AIおよび機械学習アプリケーション向けに設計されたオープンソースのフィーチャーストアです。データサイエンティストが本番環境のモデルにフィーチャーを管理および提供できるようにし、AIプロジェクトの効率性とスケーラビリティを向上させます。Feastは、AIおよび機械学習アプリケーション向けに設計されたオープンソースのフィーチャーストアです。データサイエンティストが本番環境のモデルにフィーチャーを管理および提供できるようにし、AIプロジェクトの効率性とスケーラビリティを向上させます。

Soup

AI GitHub リポジトリ

スープは、単一のYAMLファイルを使用して大規模言語モデル（LLM）のファインチューニングを可能にするGitHubリポジトリです。レイヤーストリーミングを利用して、4GBのラップトップGPU上で80億パラメータのモデルをトレーニングし、限られたハードウェアでの高度なAIモデルのトレーニングを実現します。

AirLLM

AI GitHub リポジトリ

#234

1つの4GB GPUを使用して70億パラメータの推論を可能にするGitHubプロジェクトです。限られたハードウェア上で大規模言語モデルのパフォーマンスを最適化するように設計されており、高度なAI機能をよりアクセスしやすくします。AirLLMは、1つの4GB GPUを使用して70億パラメータの推論を可能にするGitHubプロジェクトです。限られたハードウェア上で大規模言語モデルのパフォーマンスを最適化するように設計されており、高度なAI機能をよりアクセスしやすくします。

TruLens 評価ツール

AI GitHub リポジトリ

大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。TruLensは、大規模言語モデル（LLM）およびAIエージェントの実験を評価し追跡するために設計されたGitHubプロジェクトです。パフォーマンスを評価し、AI実験を効果的に管理するためのツールを提供します。

AIマネージャー

AI GitHub リポジトリ

AIコーディングツールの使用を効率化するために設計されたデスクトップアプリケーションです。開発者に対して、AIモデルを効率的に管理および展開するための統合環境を提供し、生産性とコラボレーションを向上させます。AIマネージャーは、AIコーディングツールの使用を効率化するために設計されたデスクトップアプリケーションです。開発者に対して、AIモデルを効率的に管理および展開するための統合環境を提供し、生産性とコラボレーションを向上させます。