メインコンテンツへスキップ
ToolPotion
AI アドバイザー
送信(無料)

FEDformer

AI GitHub リポジトリAIモデルとLLMオープンソース · Web

FEDformerは、効率的な長期時系列予測のために設計されたFrequency Enhanced Decomposed Transformerです。系列長に対して線形計算量で動作し、多変量および単変量データセットの両方で予測誤差を大幅に削減することで、最先端の手法を上回ります。このモデルはオープンソースコードとして利用可能です。

リポジトリを見る
共有
リポジトリを見る
共有

Frequency Enhanced Decomposed Transformerの略であるFEDformerは、長期時系列予測に特化して設計された高度なAIモデルです。研究者のTian Zhou、Ziqing Maらによって開発され、第39回国際機械学習会議(ICML 2022)で発表されました。FEDformerの主な革新性は、周波数拡張分解アーキテクチャにあり、これにより系列長に対して線形計算量で時系列データを処理できます。これは、通常二次計算量を示す標準的なTransformerと比較して大幅な改善であり、長い系列に対して計算コストが高くなるという問題を解決します。

続きを読む

このモデルの有効性は、6つのベンチマークデータセットに対する経験的研究によって検証されています。これらの研究は、FEDformerが一貫して既存の最先端手法を上回る性能を示すことを実証しています。具体的には、多変量時系列で平均14.8%、単変量時系列で平均22.6%の予測誤差削減能力を示しています。この精度と効率の向上により、FEDformerは正確な長期予測を必要とするアプリケーションにとって強力なツールとなります。

FEDformerのアーキテクチャには、Frequency Enhanced Block(FEB)とFrequency Enhanced Attention(FEA)メカニズムが組み込まれており、これらは異なる周波数ドメインにわたる複雑な時間的パターンを捉える上で重要です。このプロジェクトはGitHubでホストされており、ソースコード、実験スクリプト、およびインストールと実行に必要な要件にアクセスできます。ユーザーは、多変量および単変量の実験用に提供されているスクリプトに従ってモデルをトレーニングできます。プロジェクトには、インストール、使用法、および引用情報に関する詳細なREADMEファイルも含まれています。

FEDformerの対象ユーザーは、金融予測、気象予報、エネルギー消費分析、および正確な長期時系列予測に依存するあらゆる分野の研究者、データサイエンティスト、エンジニアです。より効率的で正確なソリューションを提供することにより、FEDformerは高度な時系列予測機能を民主化することを目指しています。プロジェクトのオープンソース性は、AIコミュニティ内での協力とさらなる開発を促進します。

  • カテゴリーAIモデルとLLM
  • 料金モデルオープンソース
  • デプロイクラウド, セルフホスト
  • プラットフォームWeb

  • 周波数拡張分解Transformerアーキテクチャ

  • 系列長に対する線形計算量

  • 時系列予測における予測誤差の削減

  • 多変量時系列におけるパフォーマンス向上

  • 単変量時系列におけるパフォーマンス向上

  • 周波数拡張アテンションメカニズム

  • 周波数拡張ブロック

  • GitHubで利用可能なオープンソースコード

  • トレーニング用の実験スクリプトを含む

  • 長期系列予測をサポート

  1. モデルへのアクセス: GitHubからFEDformerリポジトリをクローンします。

  2. 環境設定: Python (>=3.8) および PyTorch (1.9.0) をインストールします。

  3. データダウンロード: 提供されているリンクからベンチマークデータセットを取得します。

  4. モデルのトレーニング: 多変量または単変量の実験用に提供されているシェルスクリプトを実行します。

  5. API経由での統合: カスタム予測タスクのためにコードベースを適応させます。

  6. 最適化: 特定のデータセット特性に基づいてパラメータをファインチューニングします。

  • 長期予測
  • 多変量時系列分析
  • 単変量時系列分析
  • 金融市場予測
  • エネルギー消費予測
  • 気象パターン予測
  • リソース管理

FEDformer のレビュー

読み込み中...

FEDformer に似た人気のAIツール

LTSF-Linear

AI GitHub リポジトリ

LTSF-Linearは、「Are Transformers Effective for Time Series Forecasting?」の公式PyTorch実装です。長期時系列予測タスクにおいてトランスフォーマーを上回る性能を発揮する線形モデルファミリー(Linear, DLinear, NLinear)を導入し、高い効率性と解釈可能性を提供します。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

「Are Transformers Effective for Time Series Forecasting?」の公式PyTorch実装です。長期時系列予測タスクにおいてトランスフォーマーを上回る性能を発揮する線形モデルファミリー(Linear, DLinear, NLinear)を導入し、高い効率性と解釈可能性を提供します。LTSF-Linearは、「Are Transformers Effective for Time Series Forecasting?」の公式PyTorch実装です。長期時系列予測タスクにおいてトランスフォーマーを上回る性能を発揮する線形モデルファミリー(Linear, DLinear, NLinear)を導入し、高い効率性と解釈可能性を提供します。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

Autoformer

AI GitHub リポジトリ

Autoformerは、分解トランスフォーマーと自己相関メカニズムを活用した長期時系列予測のためのAIモデルです。様々なベンチマークで最先端の結果を達成し、実用的なアプリケーションにおける予測精度の向上に向けたシリーズ間の接続に関する新しいアプローチを提供します。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

分解トランスフォーマーと自己相関メカニズムを活用した長期時系列予測のためのAIモデルです。様々なベンチマークで最先端の結果を達成し、実用的なアプリケーションにおける予測精度の向上に向けたシリーズ間の接続に関する新しいアプローチを提供します。Autoformerは、分解トランスフォーマーと自己相関メカニズムを活用した長期時系列予測のためのAIモデルです。様々なベンチマークで最先端の結果を達成し、実用的なアプリケーションにおける予測精度の向上に向けたシリーズ間の接続に関する新しいアプローチを提供します。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

PatchTST

AI モデル

PatchTSTは、Transformerベースのモデルの公式実装であり、長期時系列予測に特化しています。時系列データをパッチに分割し、それらを独立して処理することで、効率的かつ効果的な予測を実現します。本プロジェクトは、教師あり学習と自己教師あり学習の両方のアプローチに対応したコードを提供し、堅牢な予測能力を可能にします。

AIモデルとLLM
ツールを見る

AI モデル

Transformerベースのモデルの公式実装であり、長期時系列予測に特化しています。時系列データをパッチに分割し、それらを独立して処理することで、効率的かつ効果的な予測を実現します。本プロジェクトは、教師あり学習と自己教師あり学習の両方のアプローチに対応したコードを提供し、堅牢な予測能力を可能にします。PatchTSTは、Transformerベースのモデルの公式実装であり、長期時系列予測に特化しています。時系列データをパッチに分割し、それらを独立して処理することで、効率的かつ効果的な予測を実現します。本プロジェクトは、教師あり学習と自己教師あり学習の両方のアプローチに対応したコードを提供し、堅牢な予測能力を可能にします。

AIモデルとLLM
AI モデル トップ5を見る

LSTNet

AI GitHub リポジトリ

LSTNetは、時系列予測のために設計されたディープラーニングモデルです。リカレントニューラルネットワークと畳み込みニューラルネットワークを組み合わせることで、長期および短期の時間的パターンを効果的にモデル化します。このモデルは、特に複雑な時系列データに有用です。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

時系列予測のために設計されたディープラーニングモデルです。リカレントニューラルネットワークと畳み込みニューラルネットワークを組み合わせることで、長期および短期の時間的パターンを効果的にモデル化します。このモデルは、特に複雑な時系列データに有用です。LSTNetは、時系列予測のために設計されたディープラーニングモデルです。リカレントニューラルネットワークと畳み込みニューラルネットワークを組み合わせることで、長期および短期の時間的パターンを効果的にモデル化します。このモデルは、特に複雑な時系列データに有用です。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

Funnel-Transformer

AI GitHub リポジトリ

Funnel-Transformerは、計算コストを削減するために隠れ状態を圧縮するAIモデルです。同じFLOPsでより深く、またはより広いモデルを構築でき、標準的な事前学習のためにトークンレベルの表現を復元できます。このモデルはTensorFlowとPyTorchの両方の実装で利用可能です。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

計算コストを削減するために隠れ状態を圧縮するAIモデルです。同じFLOPsでより深く、またはより広いモデルを構築でき、標準的な事前学習のためにトークンレベルの表現を復元できます。このモデルはTensorFlowとPyTorchの両方の実装で利用可能です。Funnel-Transformerは、計算コストを削減するために隠れ状態を圧縮するAIモデルです。同じFLOPsでより深く、またはより広いモデルを構築でき、標準的な事前学習のためにトークンレベルの表現を復元できます。このモデルはTensorFlowとPyTorchの両方の実装で利用可能です。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

Informer2020

AI GitHub リポジトリ

Informer2020 GitHubリポジトリは、効率的な長系列時系列予測のために設計されたInformerモデルのPyTorch実装を提供します。ProbSparse Attentionを特徴とし、自己注意スコアのロングテール分布を処理することで、複雑な予測タスクに対する高度なソリューションを提供します。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

Informer2020 GitHubリポジトリは、効率的な長系列時系列予測のために設計されたInformerモデルのPyTorch実装を提供します。ProbSparse Attentionを特徴とし、自己注意スコアのロングテール分布を処理することで、複雑な予測タスクに対する高度なソリューションを提供します。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

N-BEATS

AI GitHub リポジトリ

N-BEATSは、単変量時系列予測のためのニューラルネットワークベースのモデルです。ServiceNow Researchによって開発され、再現性のある実験結果を実現するためにN-BEATSアルゴリズムを実装しています。このリポジトリは、高度な時系列分析のためのPyTorch実装、データセットローダー、および実験設定を提供します。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

単変量時系列予測のためのニューラルネットワークベースのモデルです。ServiceNow Researchによって開発され、再現性のある実験結果を実現するためにN-BEATSアルゴリズムを実装しています。このリポジトリは、高度な時系列分析のためのPyTorch実装、データセットローダー、および実験設定を提供します。N-BEATSは、単変量時系列予測のためのニューラルネットワークベースのモデルです。ServiceNow Researchによって開発され、再現性のある実験結果を実現するためにN-BEATSアルゴリズムを実装しています。このリポジトリは、高度な時系列分析のためのPyTorch実装、データセットローダー、および実験設定を提供します。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る

Mamba SSM アーキテクチャ

AI GitHub リポジトリ

Mambaは、特に言語のような情報密度の高いデータに対して効果的な、効率的なシーケンスモデリングのために設計された新しい状態空間モデルアーキテクチャです。ハードウェアを意識した実装を提供し、以前のサブ二次モデルを上回り、Transformerに匹敵することを目指しています。

AIモデルとLLM
ツールを見る

AI GitHub リポジトリ

特に言語のような情報密度の高いデータに対して効果的な、効率的なシーケンスモデリングのために設計された新しい状態空間モデルアーキテクチャです。ハードウェアを意識した実装を提供し、以前のサブ二次モデルを上回り、Transformerに匹敵することを目指しています。Mambaは、特に言語のような情報密度の高いデータに対して効果的な、効率的なシーケンスモデリングのために設計された新しい状態空間モデルアーキテクチャです。ハードウェアを意識した実装を提供し、以前のサブ二次モデルを上回り、Transformerに匹敵することを目指しています。

AIモデルとLLM
AI GitHub リポジトリ トップ250を見る
1 / 8