Ir para o conteúdo

Guias da Wake

O que são dados egocêntricos para o aprendizado de robôs?

Dados egocêntricos registram uma tarefa do ponto de vista do ator. Vídeo humano em primeira pessoa pode mostrar mãos, objetos e sequências de ação. Não contém, por si só, os comandos que um robô deve executar.

Por Wake ·

Primeira pessoa pintou vista de mãos dobrando um pano em uma cozinha iluminada ao sol.

Um ponto de vista, não uma especificação completa de treinamento.

“Egocêntrico” diz onde o sensor é relativo ao ator. Não lhe diz a taxa de quadros, quais rótulos existem, se uma tarefa termina em quadro ou se a coleção inclui quaisquer sinais de movimento medidos. Essas são propriedades separadas do conjunto de dados.

Por que a visão em primeira pessoa é útil.

Muitas questões de manipulação dizem respeito ao que acontece perto das mãos: qual objeto é selecionado, o que é tocado a seguir, e como o objeto muda. Uma visão em primeira pessoa segue a pessoa através dessas interações. Também pode preservar o contexto através de várias etapas, em vez de isolar uma única compreensão.

Onde o vídeo ajuda, e onde deixa lacunas.

Uma equipe pode usar vídeo humano para estudar o reconhecimento de ação, segmentação temporal, representações visuais ou a sequência de passos em uma tarefa. Cada uso precisa de sua própria experiência e avaliação. Tratar qualquer benefício esperado como uma hipótese para testar.

O que pertence a uma breve coleção egocêntrica?

DecisãoPor que importa?
Tarefa e resultado observávelFaz uma tentativa completa distinguível de um clipe curto.
Posição da câmera e campo de visãoDetermina se as mãos, ferramentas e objetos alvo permanecem visíveis.
Variação naturalSepara gravações repetidas de diferenças úteis em objetos e configurações.
Limites de ação e rótulos de objetosTorna as partes relevantes de uma gravação longa detectável.
Falha e recuperaçãoPreserva o que aconteceu depois de um passo mal sucedido.
Repartição da avaliaçãoReduz o vazamento entre pessoas semelhantes, cenas e gravações.

Reveja episódios inteiros antes de contar horas.

Assista ao início, meio e fim de uma gravação. Pode dizer o que a pessoa pretendia fazer? A interação importante é visível? Consegue identificar o resultado sem adivinhar? Uma grande coleção com pontos de contato ocultos pode responder a uma pergunta diferente daquela que você planejou.

Perguntas frequentes

O que significa egocêntrico em IA?

Significa egocêntrico visto sob a perspectiva do ator. Em conjuntos de dados de vídeo, isso geralmente significa uma câmera usada pela pessoa que faz a atividade, de modo que a visualização se move com eles.

O vídeo egocêntrico é o mesmo que uma demonstração de robô?

Pode ser uma demonstração humana relevante para a robótica, mas não é automaticamente uma demonstração com ações de robô. O conjunto de dados deve documentar quais sinais foram realmente registrados.

Como devo avaliar um conjunto de dados egocêntrico?

Comece com relevância da tarefa, visibilidade, completude do episódio, configurações do rótulo e splits de avaliação. Em seguida, verifique se seus sinais gravados correspondem às entradas e alvos do seu modelo.

Fontes e leituras complementares

Fontes primárias revisadas em 26 de outubro de 2026.

Explore mais

O que seu robô deve aprender agora?

Informe a tarefa, o ambiente e os sinais de que você precisa. Vamos definir juntos os requisitos de coleta e anotação.