Vídeo egocéntrico
Manos, herramientas y contexto de la opinión del trabajador.
Alcance: Punto de vista, visibilidad y variación de escena.
Para laboratorios de robótica
Datos de entrenamiento para robots basados en trabajo real
Grabaciones y anotaciones de primera persona para laboratorios robóticos, equipos de modelo mundial y grupos de investigación. Copie la tarea, capture el método y los datos que su modelo necesita.
Elige tu método de captura.
La colección de datos de robótica comienza con la señal que su modelo necesita.
Manifestaciones humanas
Una tarea que se muestra desde la configuración hasta el resultado.
Alcance: Instrucciones, pasos de acción y recuperación.
Datos de teleoperación
Robot observaciones y comandos durante el control humano.
Alcance: Embodimento, acciones y señales sincronizadas.
Define cada episodio.
Acorde la especificación antes de que comience la recopilación de datos egocéntricos.
- Resultado de la tarea
- Instrucción, comienzo de los criterios de estado y terminación.
- Límites de episodio
- Comienza, termina, reinicia e intentos parciales.
- Tiempo de vídeo
- Punto de vista, velocidad de marco, resolución y sincronización.
- Cobertura & calidad
- Personas, ajustes, variaciones y comprobaciones de aceptación.
Elige las anotaciones.
Acorde los campos y las definiciones de etiquetas que su proyecto necesita.
- Episodio " IDs fuente
- Trace cada segmento a su grabación.
- Acciones " objetos
- Pasos de Timestamp y cambios de estado visibles.
- Manos " resultados
- Rastreo, terminación, fracaso y recuperación.
- Versiones de calidad
- Recordar la incertidumbre y las revisiones de etiquetas.
Especifique su formato de entrenamiento.
LeRobot, HDF5 y RLDS son requisitos de alcance, no integración verificada. La conversión no puede crear acciones robot no registradas.
LeRobot
Versión Dataset, características, teclas de cámara y representación de acción.
HDF5
Grupos, formas, tipos, unidades y compresión.
RLDS
Observaciones, acciones, banderas de paso y metadatos de episodios.
Preguntas frecuentes
¿Qué son los datos de entrenamiento de robot?
Los datos de formación de robots contienen observaciones, demostraciones, instrucciones y, cuando se registra, acciones para la formación o evaluación de modelos robot. Las señales necesarias dependen de la tarea y el robot.
¿El video egocéntrico incluye acciones de robot?
No. El video egocéntrico registra la vista de una persona. Las acciones de robot necesitan señales separadas o una asignación justificada.
¿Puedo solicitar LeRobot, HDF5 o RLDS?
Sí. Incluya el formato y la versión de cargador en su consulta. Wake alcances campos disponibles y compatibilidad antes de acordar la entrega.
¿Qué debería aprender tu robot?
Describe la tarea y los requisitos de datos. Empieza aquí o usa nuestro formulario de contacto.
Referencias de los formatos: Hugging Face: LeRobotDataset v3.0 · Google Research: Modelo de datos RLDS