Description
Basalt est conçu pour faire en sorte que vos agents IA apprennent de chaque interaction avec les utilisateurs, capturant le comportement des clients pour créer une infrastructure auto-améliorante. En analysant les conversations de la veille, Basalt détecte les problèmes et envoie chaque matin une demande de tirage (PR) de haute qualité pour améliorer les capacités de votre assistant IA.
Lire la suite
Le processus commence par la connexion de vos outils d'observabilité, tels que Langfuse, Braintrust ou Datadog. Basalt ingère automatiquement chaque conversation que vos utilisateurs ont eue pendant la nuit. Grâce à une analyse avancée, il regroupe les conversations, identifie les schémas d'erreurs et met en évidence les interactions qui révèlent des lacunes de qualité. Par exemple, si 34 conversations sont affectées par un schéma d'erreur spécifique, Basalt génère un correctif ciblé, qui peut inclure des mises à jour de prompts ou des définitions d'outils, validées par rapport à votre ensemble de données de référence avant mise en œuvre.
Un des principaux avantages de Basalt est qu'il fonctionne sans annotation manuelle. Il s'appuie sur le comportement réel des utilisateurs comme signal d'amélioration. Chaque matin, Basalt envoie une PR testable à votre dépôt, garantissant que tout changement est basé sur des données de performance réelles. Cette approche permet une amélioration continue sans perturber les fonctionnalités existantes. Avant l'ouverture de toute PR, Basalt teste le correctif proposé par rapport à votre ensemble de données de référence, qui se compose d'exemples soigneusement sélectionnés définissant un comportement correct. Si une régression est détectée, la PR est bloquée, garantissant que seuls des changements efficaces sont fusionnés.
Le modèle de tarification de Basalt est simple : vous ne payez que lorsque vous fusionnez une PR. Chaque PR est gratuite à examiner, vous permettant de décider quels changements mettre en œuvre. Ce modèle est particulièrement bénéfique pour les équipes fusionnant 20 PR ou plus par mois, car des remises sur volume sont disponibles. Avec Basalt, vous pouvez accélérer considérablement vos cycles d'itération, en faisant de cet outil un élément essentiel pour les équipes cherchant à améliorer efficacement leurs agents IA.
- CatégorieMLOps et déploiement de modèles
- Modèle tarifairePaiement par fusion
- DéploiementCloud
- PlateformesWeb
Fonctionnalités principales de Basalt
Génération automatique de PR quotidienne
Analyse de conversation en temps réel
Détection de schémas d'erreurs
Génération de correctifs ciblés
Validation par rapport à l'ensemble de données de référence
Aucune annotation manuelle requise
Modèle de tarification par fusion
Remises sur volume pour une utilisation élevée
Comment utiliser Basalt ?
Connectez vos outils d'observabilité à Basalt.
Laissez Basalt ingérer automatiquement les conversations des utilisateurs pendant la nuit.
Examinez la PR quotidienne générée par Basalt chaque matin.
Testez les changements proposés par rapport à votre ensemble de données de référence.
Fusionnez la PR si les changements sont satisfaisants.
Surveillez les performances de votre agent IA après la fusion.
Répétez le processus pour une amélioration continue.
Cas d'utilisation de Basalt
- Amélioration du support client
- Détection d'erreurs
- Optimisation des performances
- Apprentissage automatisé
- Gestion des coûts
