Descripción
telemetry.dev proporciona una observabilidad LLM integral para aplicaciones y agentes de IA, aprovechando el estándar OpenTelemetry. La plataforma permite a los desarrolladores rastrear y monitorear cada aspecto de sus operaciones de IA, desde llamadas individuales a modelos hasta ejecuciones complejas de agentes. Una característica clave es la capacidad de agrupar llamadas a modelos instrumentadas, pasos de herramientas y recuperaciones en un solo rastro, ofreciendo una visión holística de la ejecución de una solicitud o agente.
Leer más
Los usuarios pueden inspeccionar métricas críticas como el uso de tokens, costos, latencia y errores, que son esenciales para depurar fallos, optimizar el rendimiento y gestionar el gasto operativo. La plataforma calcula los costos en la ingestión basándose en el uso de tokens reportado y su catálogo de precios de modelos, con costos de span explícitos que tienen prioridad cuando están disponibles. Soporta SDKs de primera parte para TypeScript y Python, junto con integraciones para proveedores y marcos populares como OpenAI, Anthropic, Vercel AI SDK, LangChain y CrewAI. Otros lenguajes pueden conectarse enviando OTLP estándar a través de HTTP.
telemetry.dev enfatiza la privacidad y el control, permitiendo a los usuarios desactivar la captura de solicitudes y respuestas por entorno antes del almacenamiento. También se aplican patrones de redacción integrados y específicos del proyecto para ayudar a gestionar datos sensibles. La plataforma ofrece un plan gratuito que incluye 30,000 unidades de ingestión por mes, retención de 14 días, un proyecto y dos asientos, sin necesidad de tarjeta de crédito. Los planes de pago ofrecen unidades de ingestión aumentadas, retención de datos más prolongada, más proyectos y asientos adicionales, sin cargos automáticos por exceso.
Más allá del rastreo básico, telemetry.dev proporciona características como análisis MCP, alertas para costos y errores, gestión de solicitudes con versiones y despliegues, y rastreo de evaluaciones. Ayuda a identificar pasos lentos, inspeccionar llamadas fallidas y comparar gastos, latencia y errores entre modelos, proveedores y entornos. Los usuarios pueden buscar y filtrar rastros por nombre, estado, entorno, marco o sesión, asegurando que puedan encontrar rápidamente los datos que necesitan para mantener aplicaciones de IA fiables y rentables.
- CategoríaMLOps y despliegue de modelos
- Modelo de preciosFreemium
- ImplementaciónNube
- PlataformasWeb
Características principales de telemetry.dev
Observabilidad LLM para Agentes de IA
Rastreo basado en OpenTelemetry
Inspeccionar Uso de Tokens, Costos, Latencia y Errores
SDKs de Primera Parte para TypeScript y Python
Integraciones con OpenAI, Anthropic, Vercel AI SDK, LangChain
Soporte para Exportadores OTLP/HTTP Estándar
Cálculo de Costos a partir del Uso de Tokens y Precios de Modelos
Control de Captura de Solicitudes y Respuestas
Patrones de Redacción Integrados y Específicos del Proyecto
Alertas por Correo Electrónico para Costos, Presupuestos, Bucles de Agentes y Errores
Análisis MCP para Agentes de IA
Gestión de Solicitudes con Versiones y Despliegues
Rastreo de Evaluación para Ejecuciones de IA
Buscar y Filtrar Rastros por Varios Criterios
Plan Gratuito Disponible con 30,000 Unidades de Ingestión
¿Cómo usar telemetry.dev?
Crear Clave API: Genera una clave API de proyecto dentro de telemetry.dev.
Configurar Integración: Configura una integración de telemetry.dev para tu SDK, proveedor o marco, o configura un exportador OTLP/HTTP.
Instrumentar Aplicación: Integra el SDK o OpenTelemetry en tu aplicación de IA para enviar rastros.
Ejecutar Solicitud Instrumentada: Ejecuta una solicitud de IA o una ejecución de agente con la instrumentación habilitada.
Inspeccionar Rastros: Abre el rastro generado en tu proyecto de telemetry.dev para analizar llamadas a modelos, pasos de herramientas, uso y errores.
Monitorear y Alertar: Configura alertas para costos, presupuestos, bucles de agentes y errores de modelos o herramientas para gestionar proactivamente tus aplicaciones de IA.
Casos de uso de telemetry.dev
- Depuración de Fallos de IA
- Monitoreo del Gasto en IA
- Optimización del Rendimiento
- Asegurando la Fiabilidad de la IA
- Alertas Proactivas
- Gestión de Datos Sensibles
- Desarrollo de Agentes de IA
- Comparación de Modelos y Proveedores
