Description
AutoTrust-JEV-27B v1.1 est un modèle de décision textuel sophistiqué hébergé sur Hugging Face. Il est conçu pour attribuer des probabilités aux options de réponse fournies avec chaque question, facilitant ainsi les processus de prise de décision structurée. La performance du modèle est évaluée à l'aide de la suite publique Decision Index 0.3, où il a obtenu un score d'indice public de 67,31 sur 37 benchmarks indexés et a complété 140 178 demandes évaluables.
Lire la suite
Le modèle démontre des forces significatives dans la sélection d'outils, la classification d'intentions et les décisions d'automatisation quotidiennes, avec la sélection d'outils et d'automatisation étant son domaine le mieux noté avec 85,19 points de compétence. Il excelle dans des capacités spécifiques telles que la classification d'intentions, la sélection d'outils, la classification d'intentions bancaires, les décisions de contrôle d'appareils, les décisions d'utilisation d'API, la vérification de réclamations, l'inférence textuelle clinique et l'inférence de contrat.
Les points forts du benchmark d'AutoTrust-JEV-27B v1.1 incluent des scores impressionnants en classification d'intentions avec un score de 97,06 sur le benchmark CLINC150+OOS, en sélection d'outils avec un score de 96,25 sur le benchmark BFCL, et en classification d'intentions bancaires avec un score de 93,63 sur le benchmark BANKING77. Ces scores reflètent la capacité du modèle à gérer efficacement des tâches de prise de décision complexes.
Malgré ses forces, la performance du modèle dans des domaines tels que la préférence humoristique et le classement de consensus reste limitée, indiquant des domaines potentiels d'amélioration. Les utilisateurs sont conseillés de valider le modèle sur des données d'application représentatives avant de se fier à ses probabilités ou décisions, car l'évaluation publique seule n'établit pas la calibration des probabilités ou la pertinence pour des utilisations à enjeux élevés.
Le modèle est publié sous la licence Apache 2.0, garantissant un accès ouvert et une collaboration. Il est servi avec vLLM et interrogé via un moteur de décision, le rendant accessible pour une intégration dans diverses applications. AutoTrust-JEV-27B v1.1 est un outil précieux pour les industries nécessitant des capacités de prise de décision structurée.
- CatégorieModèles d'IA et LLM
- Modèle tarifaireOpen source
- DéploiementCloud
- PlateformesWeb
Points forts de AutoTrust-JEV-27B v1.1
Modèle de décision textuel
Attribution de probabilités
Classification d'intentions
Sélection d'outils
Décisions d'automatisation
Vérification de réclamations
Inférence textuelle clinique
Inférence de contrat
Premiers pas avec AutoTrust-JEV-27B v1.1
Accéder au modèle : Visitez Hugging Face
S'authentifier : Utilisez la clé API
Configurer l'environnement : Configurer le matériel local
Intégrer via l'API : Utiliser le moteur de décision
Optimiser : Valider avec des données d'application
Cas d'utilisation de AutoTrust-JEV-27B v1.1
- Classification d'intentions
- Sélection d'outils
- Décisions d'automatisation
- Vérification de réclamations
- Inférence de contrat






