Rerun — La Capa de Datos para IA Física

Descripción

Rerun ofrece una capa de datos integral diseñada para las complejidades de la IA física y la robótica. Su propósito principal es proporcionar las primitivas de datos esenciales necesarias para construir, comprender y mejorar su bucle de datos. Esta plataforma está diseñada para gestionar datos multirrate y multimodales, escalando sin problemas desde la primera grabación hasta conjuntos de datos de nivel de petabyte.

Las capacidades de Rerun abarcan todo el pipeline de datos. Sobresale en la visualización de todo, permitiendo a los usuarios revisar conjuntos de datos, depurar problemas intrincados y extender la funcionalidad con vistas y herramientas personalizadas. Para el análisis de datos, Rerun admite consultas completas de dataframe o SQL sobre cualquier dato de robótica, lo que permite análisis profundos de las grabaciones. La plataforma también facilita la transformación de datos sin necesidad de copias, permitiendo la evolución del esquema y la adición de columnas derivadas sin comprometer la integridad de los datos históricos.

Un diferenciador clave es el soporte de Rerun para entrenar modelos de IA directamente sobre grabaciones. Los usuarios pueden expresar mezclas de conjuntos de datos como consultas y transmitir datos a GPUs, aprovechando cargadores de datos conscientes de columnas y códecs de video. Esto elimina la necesidad de un paso de exportación separado, optimizando el flujo de trabajo de aprendizaje automático. Además, Rerun fomenta la colaboración asegurando que todos trabajen con los mismos datos, con un único visor y grabaciones compartidas accesibles entre equipos.

La infraestructura de Rerun Hub potencia este bucle de datos, actuando como un backend de producción para catalogar, indexar y recuperar datos de almacenes de objetos. Esto transforma el almacenamiento en bruto en una base consultable y transmitible, permitiendo transformaciones en el borde o cerca de los datos. La plataforma es de código abierto, y el equipo de Rerun contribuye activamente a proyectos relacionados de código abierto como egui y gfx-rs.

Rerun es particularmente valioso para investigadores e ingenieros en robótica, visión por computadora y desarrollo de IA. Proporciona una solución unificada para visualización, consulta, transformación y entrenamiento, acelerando significativamente los ciclos de desarrollo y mejorando el proceso de depuración para sistemas complejos de IA física. Su facilidad de integración en Python, C++ y Rust lo convierte en una herramienta versátil para una amplia gama de proyectos.

Características principales de Rerun

• Primitivas de datos para construir y comprender bucles de datos

• Soporte para datos multirrate y multimodales

• Escalable desde la grabación inicial hasta conjuntos de datos masivos

• Visualización integral de conjuntos de datos

• Herramientas de depuración para análisis detallado de problemas

• Extensible con vistas y herramientas personalizadas

• Capacidades completas de consulta de dataframe y SQL

• Transformación de datos sin copias de datos

• Soporte de evolución de esquema sin romper el historial

• Entrenamiento directo de modelos sobre grabaciones

• Cargadores de datos conscientes de columnas y códecs de video

• Acceso compartido a datos para colaboración en equipo

• Código abierto con contribuciones activas de la comunidad

• SDKs disponibles para Python, C++ y Rust

¿Cómo usar Rerun?

1. 1

   Empezar: Siga las guías de inicio rápido para C++, Python o Rust.

2. 2

   Registrar Datos: Utilice el SDK de registro de Rerun para grabar datos multirrate y multimodales.

3. 3

   Visualizar: Abra el Visor de Rerun para explorar, depurar y anotar sus datos.

4. 4

   Consultar Datos: Utilice consultas SQL o de dataframe para analizar grabaciones.

5. 5

   Transformar Datos: Refine sus datos y evolucione esquemas sin crear copias.

6. 6

   Entrenar Modelos: Transmita datos directamente desde grabaciones a sus GPUs para entrenamiento.

7. 7

   Compartir Perspectivas: Colabore con su equipo utilizando grabaciones compartidas y el Visor de Rerun.

Casos de uso de Rerun

• Visualización de Datos de Robótica
• Entrenamiento de Modelos de IA
• Mejora del Bucle de Datos
• Análisis de Datos Multimodales
• Depuración en Tiempo Real
• Desarrollo Colaborativo
• Flujos de Trabajo de Visión por Computadora
• Investigación en IA Física

Preguntas frecuentes de Rerun

• ¿Cuál es la función principal de Rerun?

  Rerun sirve como la capa de datos para IA física, proporcionando las primitivas necesarias para construir, comprender y mejorar los bucles de datos para datos multirrate y multimodales.

• ¿Qué tipos de datos puede manejar Rerun?

  Rerun está diseñado para manejar datos multirrate y multimodales, escalando desde grabaciones iniciales hasta conjuntos de datos masivos.

• ¿Cómo ayuda Rerun en la depuración?

  Rerun permite a los usuarios visualizar todo, revisar conjuntos de datos y depurar problemas a nivel de detalle, extendiéndose con vistas y herramientas personalizadas para cada etapa del pipeline.

• ¿Se puede usar Rerun para entrenamiento de modelos?

  Sí, Rerun permite el entrenamiento sin un paso de exportación al permitir a los usuarios expresar mezclas de conjuntos de datos como consultas y transmitirlas directamente a GPUs.

• ¿Qué capacidades de consulta ofrece Rerun?

  Rerun admite consultas completas de dataframe o SQL sobre cualquier dato de robótica, lo que permite a los usuarios consultar grabaciones hasta columnas, rangos de tiempo y valores.

• ¿Rerun soporta la transformación de datos?

  Sí, Rerun permite a los usuarios refinar datos sin copias, agregar columnas derivadas y evolucionar esquemas sin romper el historial.

• ¿Qué lenguajes de programación son compatibles con Rerun?

  Rerun proporciona SDKs de registro para C++, Python y Rust, con soporte para otros lenguajes potencialmente disponibles a través de problemas abiertos en GitHub.

• ¿Es Rerun de código abierto?

  Sí, Rerun es de código abierto, y el equipo de Rerun contribuye activamente a otros proyectos de código abierto.

• ¿Qué es Rerun Hub?

  Rerun Hub es el backend de producción para la capa de datos de Rerun, proporcionando catalogación, indexación de rangos de bytes y recuperación para hacer que los almacenes de objetos sean consultables y transmitibles.

• ¿Cómo facilita Rerun la colaboración en equipo?

  Rerun asegura que todos trabajen con los mismos datos al proporcionar un único visor y grabaciones compartidas accesibles para todo el equipo.

• ¿Puede Rerun visualizar datos 3D?

  Sí, Rerun es conocido por sus sólidas capacidades de visualización 3D, particularmente para aplicaciones de robótica y visión por computadora.

• ¿Dónde puedo encontrar ejemplos de Rerun?

  Los ejemplos están disponibles para mostrar el SDK de registro de Rerun y demostrar su uso para crear recorridos visuales de artículos.