Des données de travail réel pour entraîner les robots

Choisissez votre méthode de capture.

La collecte de données robotiques commence par le signal dont votre modèle a besoin.

Vidéo égocentrique

Les mains, les outils et le contexte de la vue des travailleurs.

Périmètre : Point de vue, visibilité et variation de la scène.

Manifestations humaines

Une tâche montrée de la configuration au résultat.

Périmètre : Instructions, étapes d'action et récupération.

Données relatives à la téléopération

Observations et commandes de robots pendant le contrôle humain.

Périmètre : Embodiment, actions et signaux synchronisés.

Définir chaque épisode.

D'accord sur la spécification avant que la collecte de données égocentriques ne commence.

Tâche & résultat

Instruction, état de départ et critères d'achèvement.

Limites des épisodes

Début, fin, réinitialise et tentatives partielles.

Vidéo & timing

Point de vue, fréquence d'image, résolution et synchronisation.

Couverture et qualité

Personnes, paramètres, variations et contrôles d'acceptation.

Choisissez les annotations.

Acceptez les champs et les définitions d'étiquettes dont votre projet a besoin.

Identifiants des épisodes et sources

Tracez chaque segment à son enregistrement.

Actions & objets

Étapes de l'horodatage et changements visibles de l'état.

Mains et résultats

Voies d'accès, achèvement, défaillance et récupération.

Qualité et versions

Enregistrez l'incertitude et les révisions de l'étiquette.

Précisez votre format de formation.

LeRobot, HDF5 et RLDS sont des exigences de portée, pas des intégrations vérifiées. La conversion ne peut pas créer d'actions robotisées non enregistrées.

LeRobot

Version Dataset, fonctionnalités, clés de caméra et représentation d'action.

HDF5

Groupes, formes, types, unités et compression.

RLDS

Observations, actions, drapeaux d'étape et métadonnées des épisodes.

Lire le guide du format LeRobot

Questions fréquentes

Qu'est-ce que les données de formation des robots?

Les données sur la formation des robots contiennent des observations, des démonstrations, des instructions et, lorsqu'elles sont enregistrées, des actions pour la formation ou l'évaluation des modèles de robots. Les signaux requis dépendent de la tâche et du robot.

Est-ce que la vidéo égocentrique inclut des actions de robots ?

C'est pas vrai. Vidéo excentrique enregistre une vue de personne. Les actions du robot nécessitent des signaux mesurés séparément ou une cartographie justifiée.

Puis-je demander LeRobot, HDF5 ou RLDS ?

Oui. Inclure le format et la version du chargeur dans votre demande. Wake couvre les champs disponibles et la compatibilité avant d'accepter la livraison.