説明
ノースミニコードは、CohereおよびCohere Labsによって開発された高度なモデルで、コード生成、エージェントソフトウェアエンジニアリング、およびターミナルタスクに最適化されています。30億のパラメータを持ち、3億のアクティブパラメータを備えたこのモデルは、複雑なコーディングタスクに対して非常に効率的です。このモデルは、256Kのコンテキスト長と64Kの最大出力長をサポートしており、大規模なコーディングプロジェクトに十分な容量を提供します。
続きを読む
モデルアーキテクチャは、スパースMixture-of-Experts設計のデコーダ専用Transformerに基づいています。効率的なアテンションメカニズムを取り入れ、スライディングウィンドウアテンションとRoPEを交互に使用し、位置埋め込みなしでグローバルアテンションを実現しています。この設計は、128のエキスパートを持つフィードフォワードブロックによって補完されており、トークンごとに8つがアクティブ化され、正確で効果的な処理を保証します。
ノースミニコードは、エージェントコーディングに焦点を当てた検証可能な報酬を伴う強化学習の後に、二段階のカスケード監視ファインチューニングを使用してポストトレーニングされています。このトレーニングアプローチは、複雑なコーディングタスクとツール使用機能を処理する能力を向上させます。このモデルはオープンソースで、Apache 2.0の下でライセンスされており、Hugging Faceのプラットフォームを通じて使用可能です。
ユーザーは、OpenCodeおよびホストされたHugging Face Spaceでノースミニコードを試すことができ、モデルウェイトをダウンロードする前に実際に体験できます。このモデルのパフォーマンスは、SWE-BenchやTerminal-Benchなどのさまざまな方法論を使用してベンチマークされており、エージェントコーディングタスクにおけるその能力を示しています。
ノースミニコードは、コード生成およびソフトウェアエンジニアリングタスクのための堅牢なモデルを求める開発者やエンジニアに最適です。そのツール使用機能は、Transformersのチャットテンプレートを通じてサポートされており、既存のワークフローへのシームレスな統合を可能にします。
- カテゴリーAI コーディングアシスタント
- 料金モデルオープンソース
- デプロイクラウド
- プラットフォームWeb
ノースミニコードのハイライト
30B-A3Bパラメータモデル
コード生成に最適化
エージェントソフトウェアエンジニアリングをサポート
スパースMixture-of-Expertsアーキテクチャ
効率的なアテンション実装
256Kコンテキスト長
64K最大出力長
Apache 2.0の下でオープンソース
ノースミニコードをはじめる
モデルページにアクセス: Hugging Faceを訪問
認証: アカウントにログイン
設定: サンプリングパラメータを設定
プロンプトを送信: Transformersパイプラインを使用
ファインチューニング: 監視付きファインチューニングを適用
ノースミニコードの使用例
- コード生成
- ソフトウェアエンジニアリング
- ターミナルタスク
- ツール統合
- ベンチマークテスト







