Aller au contenu principal
ToolPotion
Conseiller IA
Soumettre

telemetry.dev

telemetry.dev est une plateforme d'observabilité LLM construite sur OpenTelemetry, conçue pour les applications et agents d'IA. Elle trace les appels de modèles, les étapes d'outils et les récupérations, permettant aux utilisateurs d'inspecter l'utilisation des tokens, les coûts, la latence et les erreurs. La plateforme aide à déboguer les échecs, à surveiller les dépenses et à garantir la fiabilité des agents et des applications d'IA.

Visiter l'URL
Partager
Capture d’écran de telemetry.dev
Capture d’écran de telemetry.dev

telemetry.dev fournit une observabilité LLM complète pour les applications et agents d'IA, en s'appuyant sur la norme OpenTelemetry. La plateforme permet aux développeurs de tracer et de surveiller chaque aspect de leurs opérations d'IA, des appels de modèles individuels aux exécutions complexes d'agents. Une fonctionnalité clé est la capacité de regrouper les appels de modèles instrumentés, les étapes d'outils et les récupérations en un seul trace, offrant une vue holistique d'une demande ou de l'exécution d'un agent.

Lire la suite

Les utilisateurs peuvent inspecter des métriques critiques telles que l'utilisation des tokens, les coûts, la latence et les erreurs, qui sont essentielles pour déboguer les échecs, optimiser les performances et gérer les dépenses opérationnelles. La plateforme calcule les coûts à l'ingestion en fonction de l'utilisation des tokens rapportée et de son catalogue de tarification des modèles, les coûts de span explicites prenant la priorité lorsqu'ils sont disponibles. Elle prend en charge les SDK de première partie pour TypeScript et Python, ainsi que des intégrations pour des fournisseurs et frameworks populaires tels qu'OpenAI, Anthropic, Vercel AI SDK, LangChain et CrewAI. D'autres langages peuvent se connecter en envoyant des OTLP standard sur HTTP.

telemetry.dev met l'accent sur la confidentialité et le contrôle, permettant aux utilisateurs de désactiver la capture des prompts et des réponses par environnement avant le stockage. Des modèles de suppression intégrés et spécifiques au projet sont également appliqués pour aider à gérer les données sensibles. La plateforme propose un plan gratuit qui inclut 30 000 unités d'ingestion par mois, une rétention de 14 jours, un projet et deux sièges, sans nécessiter de carte de crédit. Les plans payants offrent des unités d'ingestion accrues, une rétention de données plus longue, plus de projets et des sièges supplémentaires, sans frais de dépassement automatiques.

Au-delà du traçage de base, telemetry.dev fournit des fonctionnalités telles que l'analyse MCP, des alertes pour les coûts et les erreurs, la gestion des prompts avec versions et déploiements, et le traçage d'évaluation. Elle aide à identifier les étapes lentes, à inspecter les appels échoués et à comparer les dépenses, la latence et les erreurs entre modèles, fournisseurs et environnements. Les utilisateurs peuvent rechercher et filtrer les traces par nom, statut, environnement, framework ou session, garantissant qu'ils peuvent rapidement trouver les données dont ils ont besoin pour maintenir des applications d'IA fiables et rentables.

  • CatégorieMLOps et déploiement de modèles
  • Modèle tarifaireFreemium
  • DéploiementCloud
  • PlateformesWeb

  • Observabilité LLM pour les agents d'IA

  • Traçage basé sur OpenTelemetry

  • Inspecter l'utilisation des tokens, les coûts, la latence et les erreurs

  • SDK de première partie pour TypeScript et Python

  • Intégrations avec OpenAI, Anthropic, Vercel AI SDK, LangChain

  • Support pour les exportateurs OTLP/HTTP standard

  • Calcul des coûts à partir de l'utilisation des tokens et de la tarification des modèles

  • Contrôle de la capture des prompts et des réponses

  • Modèles de suppression intégrés et spécifiques au projet

  • Alertes par e-mail pour les coûts, les budgets, les boucles d'agents et les erreurs

  • Analyse MCP pour les agents d'IA

  • Gestion des prompts avec versions et déploiements

  • Traçage d'évaluation pour les exécutions d'IA

  • Recherche et filtrage des traces par divers critères

  • Plan gratuit disponible avec 30 000 unités d'ingestion

  1. Créer une clé API : Générer une clé API de projet dans telemetry.dev.

  2. Configurer l'intégration : Mettre en place une intégration telemetry.dev pour votre SDK, fournisseur ou framework, ou configurer un exportateur OTLP/HTTP.

  3. Instrumenter l'application : Intégrer le SDK ou OpenTelemetry dans votre application d'IA pour envoyer des traces.

  4. Exécuter une demande instrumentée : Exécuter une demande d'IA ou une exécution d'agent avec l'instrumentation activée.

  5. Inspecter les traces : Ouvrir la trace générée dans votre projet telemetry.dev pour analyser les appels de modèles, les étapes d'outils, l'utilisation et les erreurs.

  6. Surveiller et alerter : Configurer des alertes pour les coûts, les budgets, les boucles d'agents et les erreurs de modèles ou d'outils pour gérer proactivement vos applications d'IA.

  • Débogage des échecs d'IA
  • Surveillance des dépenses d'IA
  • Optimisation des performances
  • Assurer la fiabilité de l'IA
  • Alerte proactive
  • Gestion des données sensibles
  • Développement d'agents d'IA
  • Comparaison de modèles et de fournisseurs

Avis sur telemetry.dev

Chargement...

Outils IA populaires comme telemetry.dev

Feenion AI Debugger

Applications IA

Feenion est une plateforme de débogage et d'observabilité AI open-source qui fournit des traces d'exécution complètes en DAG, des coûts de jetons, des flammes de latence et des…

MLOps et déploiement de modèles
Voir l'outil

Applications IA

Plateforme de débogage et d'observabilité AI open-source qui fournit des traces d'exécution complètes en DAG, des coûts de jetons, des flammes de latence et des…Feenion est une plateforme de débogage et d'observabilité AI open-source qui fournit des traces d'exécution complètes en DAG, des coûts de jetons, des flammes de latence et des…

MLOps et déploiement de modèles
Voir le Top 250 Applications IA

OpenLIT

Applications IA

OpenLIT est une plateforme open-source pour l'ingénierie IA, offrant une observabilité pour les applications GenAI et LLM. Elle propose le traçage, l'évaluation et la gestion des…

MLOps et déploiement de modèles

N°38 pour Ingénieurs en prompts

Voir l'outil

Applications IA

Plateforme open-source pour l'ingénierie IA, offrant une observabilité pour les applications GenAI et LLM. Elle propose le traçage, l'évaluation et la gestion des…OpenLIT est une plateforme open-source pour l'ingénierie IA, offrant une observabilité pour les applications GenAI et LLM. Elle propose le traçage, l'évaluation et la gestion des…

MLOps et déploiement de modèles
N°38 pour Ingénieurs en prompts

Opik par Comet

Applications IA

Opik est une plateforme d'observabilité AI open-source qui aide les développeurs à tester, expédier et améliorer continuellement des systèmes agentiques. Elle fournit des outils…

MLOps et déploiement de modèles
Voir l'outil

Applications IA

Plateforme d'observabilité AI open-source qui aide les développeurs à tester, expédier et améliorer continuellement des systèmes agentiques. Elle fournit des outils…Opik est une plateforme d'observabilité AI open-source qui aide les développeurs à tester, expédier et améliorer continuellement des systèmes agentiques. Elle fournit des outils…

MLOps et déploiement de modèles
Voir le Top 250 Applications IA

Latitude

Applications IA

Une plateforme open-source d'observabilité et de surveillance des agents IA qui trace les agents en production, met en évidence les pannes et envoie des agents de codage pour les…

MLOps et déploiement de modèles

N°37 en Outils d'ingénierie de prompts

Voir l'outil

Applications IA

Une plateforme open-source d'observabilité et de surveillance des agents IA qui trace les agents en production, met en évidence les pannes et envoie des agents de codage pour les…

En vedetteMLOps et déploiement de modèles
N°37 en Outils d'ingénierie de prompts

HoneyHive

Applications IA

HoneyHive fournit une couche d'observabilité pour les agents IA en production, unifiant la surveillance et l'évaluation. Elle permet des boucles d'amélioration continue,…

MLOps et déploiement de modèles

N°34 pour Ingénieurs en prompts

Voir l'outil

Applications IA

Fournit une couche d'observabilité pour les agents IA en production, unifiant la surveillance et l'évaluation. Elle permet des boucles d'amélioration continue,…HoneyHive fournit une couche d'observabilité pour les agents IA en production, unifiant la surveillance et l'évaluation. Elle permet des boucles d'amélioration continue,…

En vedetteMLOps et déploiement de modèles
N°34 pour Ingénieurs en prompts

Langtrace

Applications IA

Langtrace est une plateforme d'observabilité et d'évaluation open-source conçue pour aider les développeurs à transformer les prototypes d'IA en produits de niveau entreprise.…

MLOps et déploiement de modèles

N°107 en MLOps et déploiement de modèles

Voir l'outil

Applications IA

Plateforme d'observabilité et d'évaluation open-source conçue pour aider les développeurs à transformer les prototypes d'IA en produits de niveau entreprise.…Langtrace est une plateforme d'observabilité et d'évaluation open-source conçue pour aider les développeurs à transformer les prototypes d'IA en produits de niveau entreprise.…

MLOps et déploiement de modèles
N°107 en MLOps et déploiement de modèles

TruLens est une bibliothèque open source pour évaluer et tracer les agents IA. Elle utilise OpenTelemetry pour instrumenter les agents, évalue les étapes avec des juges LLM et…

MLOps et déploiement de modèles

N°63 en MLOps et déploiement de modèles

Voir l'outil

Bibliothèque open source pour évaluer et tracer les agents IA. Elle utilise OpenTelemetry pour instrumenter les agents, évalue les étapes avec des juges LLM et…TruLens est une bibliothèque open source pour évaluer et tracer les agents IA. Elle utilise OpenTelemetry pour instrumenter les agents, évalue les étapes avec des juges LLM et…

MLOps et déploiement de modèles
N°63 en MLOps et déploiement de modèles

Helicone AI Gateway

Applications IA

Helicone est une plateforme LLMOps conçue pour construire des applications IA fiables. Elle offre des capacités de routage, de débogage et d'analyse, permettant aux développeurs…

MLOps et déploiement de modèles

N°9 en Outils d'ingénierie de prompts

Voir l'outil

Applications IA

Plateforme LLMOps conçue pour construire des applications IA fiables. Elle offre des capacités de routage, de débogage et d'analyse, permettant aux développeurs…Helicone est une plateforme LLMOps conçue pour construire des applications IA fiables. Elle offre des capacités de routage, de débogage et d'analyse, permettant aux développeurs…

En vedetteMLOps et déploiement de modèles
N°9 en Outils d'ingénierie de prompts
1 sur 8