Description
telemetry.dev fournit une observabilité LLM complète pour les applications et agents d'IA, en s'appuyant sur la norme OpenTelemetry. La plateforme permet aux développeurs de tracer et de surveiller chaque aspect de leurs opérations d'IA, des appels de modèles individuels aux exécutions complexes d'agents. Une fonctionnalité clé est la capacité de regrouper les appels de modèles instrumentés, les étapes d'outils et les récupérations en un seul trace, offrant une vue holistique d'une demande ou de l'exécution d'un agent.
Lire la suite
Les utilisateurs peuvent inspecter des métriques critiques telles que l'utilisation des tokens, les coûts, la latence et les erreurs, qui sont essentielles pour déboguer les échecs, optimiser les performances et gérer les dépenses opérationnelles. La plateforme calcule les coûts à l'ingestion en fonction de l'utilisation des tokens rapportée et de son catalogue de tarification des modèles, les coûts de span explicites prenant la priorité lorsqu'ils sont disponibles. Elle prend en charge les SDK de première partie pour TypeScript et Python, ainsi que des intégrations pour des fournisseurs et frameworks populaires tels qu'OpenAI, Anthropic, Vercel AI SDK, LangChain et CrewAI. D'autres langages peuvent se connecter en envoyant des OTLP standard sur HTTP.
telemetry.dev met l'accent sur la confidentialité et le contrôle, permettant aux utilisateurs de désactiver la capture des prompts et des réponses par environnement avant le stockage. Des modèles de suppression intégrés et spécifiques au projet sont également appliqués pour aider à gérer les données sensibles. La plateforme propose un plan gratuit qui inclut 30 000 unités d'ingestion par mois, une rétention de 14 jours, un projet et deux sièges, sans nécessiter de carte de crédit. Les plans payants offrent des unités d'ingestion accrues, une rétention de données plus longue, plus de projets et des sièges supplémentaires, sans frais de dépassement automatiques.
Au-delà du traçage de base, telemetry.dev fournit des fonctionnalités telles que l'analyse MCP, des alertes pour les coûts et les erreurs, la gestion des prompts avec versions et déploiements, et le traçage d'évaluation. Elle aide à identifier les étapes lentes, à inspecter les appels échoués et à comparer les dépenses, la latence et les erreurs entre modèles, fournisseurs et environnements. Les utilisateurs peuvent rechercher et filtrer les traces par nom, statut, environnement, framework ou session, garantissant qu'ils peuvent rapidement trouver les données dont ils ont besoin pour maintenir des applications d'IA fiables et rentables.
- CatégorieMLOps et déploiement de modèles
- Modèle tarifaireFreemium
- DéploiementCloud
- PlateformesWeb
Fonctionnalités principales de telemetry.dev
Observabilité LLM pour les agents d'IA
Traçage basé sur OpenTelemetry
Inspecter l'utilisation des tokens, les coûts, la latence et les erreurs
SDK de première partie pour TypeScript et Python
Intégrations avec OpenAI, Anthropic, Vercel AI SDK, LangChain
Support pour les exportateurs OTLP/HTTP standard
Calcul des coûts à partir de l'utilisation des tokens et de la tarification des modèles
Contrôle de la capture des prompts et des réponses
Modèles de suppression intégrés et spécifiques au projet
Alertes par e-mail pour les coûts, les budgets, les boucles d'agents et les erreurs
Analyse MCP pour les agents d'IA
Gestion des prompts avec versions et déploiements
Traçage d'évaluation pour les exécutions d'IA
Recherche et filtrage des traces par divers critères
Plan gratuit disponible avec 30 000 unités d'ingestion
Comment utiliser telemetry.dev ?
Créer une clé API : Générer une clé API de projet dans telemetry.dev.
Configurer l'intégration : Mettre en place une intégration telemetry.dev pour votre SDK, fournisseur ou framework, ou configurer un exportateur OTLP/HTTP.
Instrumenter l'application : Intégrer le SDK ou OpenTelemetry dans votre application d'IA pour envoyer des traces.
Exécuter une demande instrumentée : Exécuter une demande d'IA ou une exécution d'agent avec l'instrumentation activée.
Inspecter les traces : Ouvrir la trace générée dans votre projet telemetry.dev pour analyser les appels de modèles, les étapes d'outils, l'utilisation et les erreurs.
Surveiller et alerter : Configurer des alertes pour les coûts, les budgets, les boucles d'agents et les erreurs de modèles ou d'outils pour gérer proactivement vos applications d'IA.
Cas d'utilisation de telemetry.dev
- Débogage des échecs d'IA
- Surveillance des dépenses d'IA
- Optimisation des performances
- Assurer la fiabilité de l'IA
- Alerte proactive
- Gestion des données sensibles
- Développement d'agents d'IA
- Comparaison de modèles et de fournisseurs






