LLM architecture from scratch

LLMs-from-scratch

AI GitHub リポジトリ

ユーザーがPyTorchを使用してChatGPTのような言語モデルを実装する手助けをするGitHubプロジェクトです。ゼロから大規模言語モデルを構築するためのステップバイステップのアプローチを提供し、AIや機械学習に興味のある開発者や研究者に最適です。LLMs-from-scratchは、ユーザーがPyTorchを使用してChatGPTのような言語モデルを実装する手助けをするGitHubプロジェクトです。ゼロから大規模言語モデルを構築するためのステップバイステップのアプローチを提供し、AIや機械学習に興味のある開発者や研究者に最適です。

ハッピーLLM

AI GitHub リポジトリ

ゼロから大規模言語モデルを構築することを目的としたオープンソースプロジェクトです。開発者がモデル開発に貢献し、協力するためのリソースとツールを提供します。ハッピーLLMは、ゼロから大規模言語モデルを構築することを目的としたオープンソースプロジェクトです。開発者がモデル開発に貢献し、協力するためのリソースとツールを提供します。

llama.cpp

AI GitHub リポジトリ

C/C++におけるLLM推論に特化したGitHubリポジトリです。開発者がその開発に貢献し、機械学習アプリケーションのためにその機能を活用することができます。ggml-org/llama.cppは、C/C++におけるLLM推論に特化したGitHubリポジトリです。開発者がその開発に貢献し、機械学習アプリケーションのためにその機能を活用することができます。

Petals

AI GitHub リポジトリ

#102

ユーザーがBitTorrentスタイルのアプローチを使用して自宅で大規模言語モデル（LLM）を実行できるオープンソースプロジェクトです。従来のオフロード手法と比較して、より迅速なファインチューニングと推論を提供します。Petalsは、ユーザーがBitTorrentスタイルのアプローチを使用して自宅で大規模言語モデル（LLM）を実行できるオープンソースプロジェクトです。従来のオフロード手法と比較して、より迅速なファインチューニングと推論を提供します。

ゼロからLLMをトレーニングする

AI GitHub リポジトリ

自分自身の大規模言語モデルをトレーニングするための包括的なガイドを提供します。データ取得からテキスト生成までをカバーしており、カスタムAIモデルの構築に興味のある開発者にとって必須のリソースです。ゼロからLLMをトレーニングするは、自分自身の大規模言語モデルをトレーニングするための包括的なガイドを提供します。データ取得からテキスト生成までをカバーしており、カスタムAIモデルの構築に興味のある開発者にとって必須のリソースです。

Ling

AI GitHub リポジトリ

Ant GroupのinclusionAIからのオープンソースの専門家混合言語モデルファミリーで、MITライセンスの下でGitHubに公開されています。一般的なチャット、コーディング、推論タスク向けに複数のサイズで提供されており、オープンLLMを自分で実行またはファインチューニングしたい研究者や開発者を対象としています。Lingは、Ant GroupのinclusionAIからのオープンソースの専門家混合言語モデルファミリーで、MITライセンスの下でGitHubに公開されています。一般的なチャット、コーディング、推論タスク向けに複数のサイズで提供されており、オープンLLMを自分で実行またはファインチューニングしたい研究者や開発者を対象としています。

FlashInfer

AI GitHub リポジトリ

大規模言語モデル（LLM）を提供するために設計されたカーネルライブラリです。LLMの効率的なデプロイと管理を促進し、開発者がGitHubを通じてその機能を向上させることを可能にします。FlashInferは、大規模言語モデル（LLM）を提供するために設計されたカーネルライブラリです。LLMの効率的なデプロイと管理を促進し、開発者がGitHubを通じてその機能を向上させることを可能にします。

OpenLLaMA

AI GitHub リポジトリ

Meta AIのLLaMA 7Bモデルを許可なく利用可能なライセンスで再現したオープンソースモデルです。RedPajamaデータセットで学習され、3B、7B、13Bのパラメータバージョンを提供し、既存のLLaMA実装にシームレスに統合するためのPyTorchおよびJAXウェイトを提供します。OpenLLaMAは、Meta AIのLLaMA 7Bモデルを許可なく利用可能なライセンスで再現したオープンソースモデルです。RedPajamaデータセットで学習され、3B、7B、13Bのパラメータバージョンを提供し、既存のLLaMA実装にシームレスに統合するためのPyTorchおよびJAXウェイトを提供します。