説明
Ming-3.0-tts-tinyは、inclusionAIによって開発された高度な多言語音声合成モデルです。Ling V3バックボーンに基づいて構築されており、7.9億の総パラメータを持つエキスパート混合アーキテクチャを特徴としており、トークンごとに約13億がアクティブになります。このモデルは、中国語、英語、ドイツ語、スペイン語、フランス語、韓国語、日本語を含む幅広い言語をサポートし、四川語と広東語の方言制御を提供します。
続きを読む
このモデルは、短い参照クリップからのゼロショット音声クローンを提供し、ユーザーが自然言語の話者の説明から音声をデザインできるようにします。100以上の組み込み中国語音声と5つの組み込み英語音声を備え、配信や話し方に対する自由形式の制御を提供します。ユーザーは、感情、速度、音程、音量などのさまざまな属性を制御し、合成に呼吸、咳、ため息、笑いなどのパラ言語的要素を組み込むことができます。
Ming-3.0-tts-tinyは、Python 3.10.15、PyTorch、およびtorchaudio 2.7.1+cu118を利用する別の推論環境を必要とします。このモデルは、チェックポイントアクセスのためにHugging Faceを通じて配布されており、推論のセットアップと使用方法の指示は関連するGitHubリポジトリを通じて入手できます。このモデルは、多言語合成、パラ言語的制御、ポッドキャスト対話など、さまざまなタスクをサポートしています。
高度な機能を持ちながらも、このモデルは韓国語のコンテンツ精度や多言語および方言評価における話者の類似性に制限があります。感情制御は、言葉に感情的な信号が欠けている場合に難しいことがあります。また、ポッドキャストの音質は改善の余地があります。このモデルはMITライセンスの下でリリースされており、研究および正当な創造的使用を強調しています。
- カテゴリーテキスト読み上げ
- 料金モデルオープンソース
- デプロイクラウド
- プラットフォームWeb
Ming-3.0-tts-tinyのハイライト
エキスパート混合アーキテクチャ
Ling V3バックボーン
ゼロショット音声クローン
説明からの音声デザイン
多言語合成
四川語と広東語の方言制御
パラ言語的要素の統合
明示的な感情、速度、音程、音量の制御
Ming-3.0-tts-tinyをはじめる
モデルにアクセス: Hugging Faceリポジトリを訪問
認証: GitHubリポジトリをクローン
環境を設定: 依存関係をインストール
API経由で統合: Python APIまたはCLIを使用
最適化: タスクに合わせてパラメータを調整
Ming-3.0-tts-tinyの使用例
- 音声クローン
- 多言語合成
- ポッドキャスト対話
- パラ言語的制御
- 音声デザイン








