Ir al contenido

Guías de Wake

¿Qué son los datos egocéntricos para el aprendizaje de robots?

Los datos egocéntricos registran una tarea desde el punto de vista del actor. El video humano de primera persona puede mostrar manos, objetos y secuencias de acción. No contiene, por sí mismo, los comandos que debe ejecutar un robot.

Por Wake ·

Vista pintada de primera persona de las manos doblando un paño en una cocina iluminada por el sol.

Un punto de vista, no una especificación completa de la formación.

“Egocéntrico” le dice dónde el sensor es relativo al actor. No le dice la tasa de marco, que las etiquetas existen, si una tarea termina en el marco o si la colección incluye cualquier señal de movimiento medida. Esas son propiedades separadas del conjunto de datos.

Por qué la vista de primera persona es útil.

Muchas preguntas de manipulación se refieren a lo que sucede cerca de las manos: qué objeto se selecciona, qué se toca a continuación, y cómo el objeto cambia. Una opinión de primera persona sigue a la persona a través de esas interacciones. También puede preservar el contexto a través de varios pasos en lugar de aislar una sola comprensión.

Donde el vídeo ayuda, y donde deja las lagunas.

Un equipo podría utilizar video humano para estudiar el reconocimiento de acción, segmentación temporal, representaciones visuales o la secuencia de pasos en una tarea. Cada uso necesita su propio experimento y evaluación. Tratar cualquier beneficio esperado como una hipótesis para probar.

¿Qué pertenece a una colección egocéntrica?

DecisiónPor qué importa
Resultado de tareas y observablesHace un intento completo distinguible de un corto clip.
Posición de la cámara y campo de vistaDetermina si las manos, las herramientas y los objetos de destino permanecen visibles.
Variación naturalSepara grabaciones repetidas de diferencias útiles en objetos y configuraciones.
Límites de acción y etiquetas de objetosHace que las partes pertinentes de una larga grabación sean identificables.
Fallo y recuperaciónPreserva lo que pasó después de un paso infructuoso.
Serie de evaluaciónReduce las fugas entre personas, escenas y grabaciones similares.

Revise episodios enteros antes de contar horas.

Mira el principio, el medio y el final de una grabación. ¿Puede decir lo que la persona tenía la intención de hacer? ¿Es visible la interacción importante? ¿Puedes identificar el resultado sin adivinar? Una gran colección con puntos de contacto ocultos puede responder a una pregunta diferente de la que planeó.

Preguntas frecuentes

¿Qué significa el egocéntrico en AI?

Egocéntrico significa contemplado desde la perspectiva del actor. En conjuntos de datos de vídeo, esto generalmente significa una cámara usada por la persona que hace la actividad, por lo que la vista se mueve con ellos.

¿Es el video egocéntrico igual que una demostración de robot?

Puede ser una demostración humana relevante para la robótica, pero no es automáticamente una demostración con acciones de robot. El conjunto de datos debe documentar cuáles son las señales en realidad registradas.

¿Cómo puedo evaluar un conjunto de datos egocéntrico?

Comience con relevancia de tarea, visibilidad, integridad de episodios, definiciones de etiquetas y divisiones de evaluación. A continuación, compruebe si sus señales registradas coinciden con las entradas y objetivos de su modelo.

Fuentes y lecturas recomendadas

Fuentes primarias revisadas el 26 de octubre de 2026.

Sigue explorando

¿Qué debería aprender ahora tu robot?

Cuéntanos qué tarea, entorno y señales necesitas. Definiremos contigo los requisitos de recopilación y anotación.