Description
North Mini Code est un modèle sophistiqué développé par Cohere et Cohere Labs, optimisé pour la génération de code, l'ingénierie logicielle agentique et les tâches terminales. Il dispose d'un modèle de 30 milliards de paramètres avec 3 milliards de paramètres actifs, ce qui le rend très efficace pour des tâches de codage complexes.
Lire la suite
Le modèle prend en charge une longueur de contexte de 256K et une longueur de sortie maximale de 64K, offrant une capacité suffisante pour des projets de codage étendus.
L'architecture du modèle est basée sur un Transformer uniquement décodeur avec un design Mixture-of-Experts sparse. Il incorpore un mécanisme d'attention efficace, entrelaçant l'attention par fenêtre glissante avec RoPE et l'attention globale sans embeddings positionnels. Ce design est complété par un bloc feed-forward avec 128 experts, dont 8 sont activés par jeton, garantissant un traitement précis et efficace.
North Mini Code a été post-entraîné en utilisant un fine-tuning supervisé en deux étapes suivi d'un apprentissage par renforcement avec des récompenses vérifiables, se concentrant sur le codage agentique. Cette approche de formation améliore sa capacité à gérer des tâches de codage complexes et des capacités d'utilisation d'outils. Le modèle est open-source, sous licence Apache 2.0, et disponible pour utilisation via la plateforme Hugging Face.
Les utilisateurs peuvent essayer North Mini Code dans OpenCode et l'espace Hugging Face hébergé, permettant une expérience pratique avant de télécharger les poids du modèle. Les performances du modèle ont été évaluées à l'aide de diverses méthodologies, y compris SWE-Bench et Terminal-Bench, démontrant sa compétence dans les tâches de codage agentique.
North Mini Code est idéal pour les développeurs et les ingénieurs à la recherche d'un modèle robuste pour la génération de code et les tâches d'ingénierie logicielle. Ses capacités d'utilisation d'outils sont prises en charge par des modèles de chat dans Transformers, permettant une intégration transparente dans les flux de travail existants.
- CatégorieAssistants de codage IA
- Modèle tarifaireOpen source
- DéploiementCloud
- PlateformesWeb
Points forts de North Mini Code
Modèle de 30B-A3B paramètres
Optimisé pour la génération de code
Prend en charge l'ingénierie logicielle agentique
Architecture Mixture-of-Experts sparse
Mise en œuvre efficace de l'attention
Longueur de contexte de 256K
Longueur de sortie maximale de 64K
Open-source sous Apache 2.0
Premiers pas avec North Mini Code
Accéder à la page du modèle : Visitez Hugging Face
Authentifier : Connectez-vous à votre compte
Configurer : Définissez les paramètres d'échantillonnage
Envoyer des invites : Utilisez le pipeline des transformers
Affiner : Appliquez le fine-tuning supervisé
Cas d'utilisation de North Mini Code
- Génération de Code
- Ingénierie Logicielle
- Tâches Terminales
- Intégration d'Outils
- Tests de Benchmark
