Sand.ai

説明

Sand.aiは、動画生成技術と製品を専門とするAI企業です。自社で自動回帰型動画モデルのMagi-1と同時音声・映像生成のためのGAGA-1を開発し、大規模オープンソースのMixture-of-Experts動画生成モデルとして説明されるMAGI-2 Previewをリリースしました。

MAGI-2 Previewは、114Bパラメータの統合音声・映像生成モデルで、トークンごとにわずか6Bパラメータを活性化します。MagiMoEに基づき、アーキテクチャ、システム、データ全体で共同設計されており、対話、歌、感情の変化を自然に調和させたリップシンク、表情、目の動き、ボディランゲージを生成します。視覚と音声が単一のモデルによって共同生成されるため、対話とリップの動き、アクションと効果音、環境の変化と音声フィードバックが正確に整合します。このモデルは、ショットスケール、構図、視点、カメラの動きの意図を理解し、ズーム、トラッキング、軌道移動などの撮影のような視覚的リズムを生み出します。

開発者は、APIプラットフォームを通じてSand.aiの機能にアクセスできます。Magiアカウントでログインした後、ユーザーはクレジットを購入し、APIキーを作成し、Authorizationヘッダーを介して呼び出しを認証できます。プラットフォームとMagiの請求は別々に管理されるため、APIの使用はMagiアカウントのクレジットを消費しません。

Sand.aiの主要機能

• 114Bパラメータの統合音声・映像生成モデルMAGI-2 Preview

• 正確なリップシンクの整合性を持つ音声と映像の共同生成

• キャラクターのパフォーマンス：対話、歌、感情の変化

• ショットスケール、構図、カメラの動きに対する撮影制御

• 自動回帰型動画モデルMagi-1と音声・映像モデルGAGA-1

• クレジットとAPIキー管理を備えた開発者向けAPIプラットフォーム

Sand.aiの使い方は？

1. 1

   アカウントを作成する：Magiアカウントを使用してプラットフォームにログインします。

2. 2

   クレジットを購入する：API使用のためのクレジットパッケージを購入します。

3. 3

   APIキーを作成する：APIキー管理ページでキーを生成し、安全に保存します。

4. 4

   APIを呼び出す：Authorizationヘッダーを介してキーで認証し、音声・映像コンテンツを生成します。

Sand.aiの使用例

• トーキングキャラクター動画
• 映画的動画生成
• 音声・映像コンテンツの作成
• 開発者統合

Sand.aiのFAQ

• Sand.aiとは何ですか？

  Sand.aiは動画生成に特化したAI企業で、MagiモデルファミリーとMAGI-2 Preview音声・映像生成モデルで知られています。

• MAGI-2 Previewとは何ですか？

  114Bパラメータの統合音声・映像生成モデルで、トークンごとに約6Bパラメータを活性化し、同期した視覚と音声を生成します。

• どのように音声と映像を同期させていますか？

  視覚と音声は単一のモデルによって共同生成され、対話とリップの動き、アクションと効果音、シーンの変化と音声フィードバックが整合します。

• モデルはオープンソースですか？

  MAGI-2 Previewは完全にオープンソースプロジェクトとしてリリースされ、Magi-1は同社が開発した自動回帰型動画モデルです。

• 開発者はどのようにSand.aiにアクセスしますか？

  APIプラットフォームを通じて：Magiアカウントでログインし、クレジットを購入し、APIキーを作成し、Authorizationヘッダーを介してリクエストを認証します。