Ir al contenido

Cómo elegir datos

Cómo elegir conjuntos de datos egocéntricos abiertos para entrenar robots

Compare video humano de primera persona con conjuntos de datos de demostración robot. Ego4D, EPIC-KITCHENS y Ego-Exo4D enfatizan la actividad humana; DROID y Open X-Embodiment proporcionan trayectorias robot.

Por Wake ·

Robot pintado entre un archivo de investigación y un banco de montaje práctico.

Una comparación práctica.

FuentePrioridad en la investigaciónQué hacer para comprobar
Ego4DAmplias actividades diarias de primera persona y tareas de referencia.Situaciones pertinentes, modalidades disponibles y anotaciones de referencia.
EPIC-KITCHENSActividad de primera persona en cocinas caseras.segmentos de acción, vocabulario de objetos y definiciones de división.
Ego-Exo4DActividades con visión egocéntrica y externa.Que puntos de vista y anotaciones existen para la actividad seleccionada.
DROIDManifestaciones de manipulación de robots.Vistas de cámara, estado, acciones y calibración.
Open X-EmbodimentManifestaciones de robot en múltiples encarnaciones.Fuente dataset, robot, representación de la acción y licencia.
Colección de WakeLas grabaciones del lugar de trabajo abarcaron la tarea de un comprador.Fiabilidad, permisos, especificación de episodios y requisitos de anotación.

Actividad humana: Ego4D, EPIC-KITCHENS y Ego-Exo4D.

Comience con Ego4D para diversas actividades de primera persona, EPIC-KITCHENS para acciones de cocina, y Ego-Exo4D para vistas de primera persona y externas emparejadas. Revise las anotaciones de cada lanzamiento contra su pregunta.

Conjunto de datos DROID: manipulación de robots grabada.

DROID proporciona trayectorias de manipulación de robots, incluyendo observaciones de cámara y acciones. Inspeccione su configuración de robots, calibración y cobertura de tareas antes de usarlo para formar una política.

Open X-Embodiment: aprender a través de robots.

Open X-Embodiment reúne conjuntos de datos de diferentes robots. Compruebe las convenciones de observación y acción de cada fuente, campos y términos disponibles. Un contenedor común no hace que las acciones de cada robot sean equivalentes.

Cuando un conjunto de datos existente es suficiente.

Comience con una versión existente cuando contenga las observaciones y etiquetas pertinentes y ofrezca una evaluación adecuada. Puede revelar si la idea de modelado vale más trabajo antes de que un equipo defina nueva colección.

Cuándo buscar nuevos datos.

La nueva colección se vuelve útil cuando se mantiene una brecha concreta: una herramienta particular, un flujo de trabajo perdido, una continuidad de tareas más largas, un modo de fracaso requerido o un ajuste de evaluación ausente de la publicación. Defina esa brecha en términos observables.

Preguntas frecuentes

¿Los datos egocéntricos abiertos significan uso irrestricto?

No. La disponibilidad pública y el permiso para un uso particular son preguntas separadas. Lea los términos actuales para el lanzamiento exacto de conjunto de datos y el trabajo que tiene previsto hacer.

¿Qué conjunto de datos egocéntricos es mejor para la robótica?

No hay una sola mejor opción para todo aprendizaje robot. Elija por tarea, punto de vista, anotaciones, señales medida y diseño de evaluación. Algunos objetivos requieren datos de acción robot que el vídeo humano no contiene.

¿Cuándo debería recopilar nuevos datos?

Recoge nuevos datos cuando puedes nombrar una brecha relevante en las versiones existentes, como un ambiente, objeto, flujo de trabajo o señal necesaria por tu experimento.

¿Son conjuntos de datos humanos egocéntricos DROID y Open X-Embodiment?

No. Proporcionan datos de demostración de robot. Comparen con el video humano cuando decidan si su proyecto necesita actividad humana observada o acciones de robot grabadas.

Fuentes y lecturas recomendadas

Fuentes primarias revisadas el 26 de octubre de 2026.

Sigue explorando

¿Qué debería aprender ahora tu robot?

Cuéntanos qué tarea, entorno y señales necesitas. Definiremos contigo los requisitos de recopilación y anotación.