説明
MiniCPM-V-4.7-35B-A3B-DSparkは、MiniCPM-V-4.7-35B-A3Bおよびそのトークナイザーとのシームレスな統合のために開発された高度なDSparkドラフトチェックポイントモデルです。このモデルは、視覚、テキスト、数学、コードなど、さまざまな分野でのタスクを処理するように調整されています。視覚およびテキストプロンプトの混合を使用してトレーニングされており、アプリケーションの多様性を確保しています。
続きを読む
このモデルは、5つのドラフトレイヤーと389,223,169のドラフトパラメータを備え、1回のフォワードパスあたり15のドラフトトークン容量を持っています。特定の間隔でターゲット隠れ状態レイヤーが設計されており、処理能力が向上しています。チェックポイントの精度はBF16に設定されており、パフォーマンスと効率が最適化されています。
トレーニングは、MiniCPM-V-4.7-35B-A3Bからの応答を生成する包括的なトレーニングレシピを使用して行われ、6エポックにわたって200万のトレーニングシーケンスが含まれています。使用されるオプティマイザーはAdamWで、目的はCE、L1、および信頼性損失に焦点を当てています。
モデルの評価は、MathVistaやOCRBenchなどのさまざまな分野で行われ、受け入れ長は3.501から7.387の範囲です。これにより、モデルの堅牢性とさまざまなタスクへの適応性が確保されています。
高度な機能を持ちながらも、モデルには限界があります。自律的な意図が欠如しており、その出力は統計的パターンに基づいているため、不正確さやバイアスが生じる可能性があります。ユーザーは、モデルを倫理的に使用し、適切な安全策を構成することをお勧めします。
- カテゴリーAIモデルとLLM
- 料金モデルオープンソース
- デプロイクラウド
- プラットフォームWeb
MiniCPM-V-4.7-35B-A3B-DSparkのハイライト
DSparkドラフトチェックポイントモデル
MiniCPM-V-4.7-35B-A3Bとの統合
視覚およびテキストプロンプトのサポート
5つのドラフトレイヤー
389,223,169のドラフトパラメータ
BF16チェックポイント精度
200万のトレーニングシーケンス
複数の分野での評価
MiniCPM-V-4.7-35B-A3B-DSparkをはじめる
モデルページにアクセス: Hugging Faceのウェブサイトを訪問
認証: Hugging Faceアカウントにログイン
設定: モデルパラメータを必要に応じて設定
プロンプトを送信: 視覚またはテキストプロンプトを入力
ファインチューニング: 特定のタスクに合わせてモデル設定を調整
MiniCPM-V-4.7-35B-A3B-DSparkの使用例
- 視覚処理
- テキスト分析
- 数学的計算
- コード生成
- マルチモーダル統合











