Mémoire spatiale
Présentation de re1 : la mémoire spatiale pour l'IA physique
Recherchez des événements enregistrés, consultez la vidéo source et revisitez les lieux capturés en 3D.
re1 est un système de mémoire spatiale pour l'IA physique. Recherchez des observations enregistrées, posez des questions qui remontent à la vidéo source et inspectez les lieux reconstruits. Les enregistrements présentés ici montrent ces trajectoires dans l'aperçu de la recherche actuelle.
Trouvez l'observation
re1/Mémoire spatiale
Chercher un enregistrement. Vérifier la réponse. Revisiter le lieu.
01 / Retrouver
Trouvez l'observation dont vous avez besoin.
Une recherche de machines manipulant des colis en intérieur retrouve des vidéos d'entrepôt et de bras robotisé. Ouvrez un résultat pour examiner la source.
Requête → observations enregistréesCapture de produitsMachines manipulant des colis à l'intérieur
RechercherOuvrirInspectezRésultats de recherche réels. Ouvrez l'image pour inspecter l'interface d'origine. 02 / Examiner
Suivez une réponse jusqu'à sa source.
La réponse capturée cite 0:12–0:20 de la vidéo de l'entrepôt. Le lecteur peut ouvrir cet intervalle et confronter la description aux images.
Réponse → intervalle inspectéCapture de produitsRéponse enregistrée · extrait
La zone d’emballage et de tri fonctionne normalement, avec plusieurs convoyeurs et bras robotisés en état de marche comme prévu.
Intervalle source0:12–0:20
0:12–0:20Vidéo source inspectée
Extrait d’une réponse enregistrée. La citation porte sur l’intervalle indiqué. 03 / Revoir
Gardez une place disponible après la capture.
Parcourez un environnement capturé depuis un autre point de vue et inspectez ses objets. Les scènes préparées restent disponibles pour la suite du travail.
Capture → scène persistanteCapture de produits
Un lieu à revisiterScène achevée
Une image de la reconstruction terminée présentée dans la vidéo sur cette page.
Capturé dans la version de recherche de re1.
Commencez par décrire ce que vous recherchez. Dans cet exemple, « des machines manipulant des colis à l'intérieur » placent un entrepôt et une attache robotisée à l'avant de la bibliothèque. Ouvrez une allumette pour voir ce qui s'est passé.
La recherche distingue les correspondances confirmées des autres candidats. L'image ci-dessous est une capture réelle du produit.
Vérifiez ce que la réponse a utilisé
Il est plus facile de vérifier une réponse lorsqu'elle nomme l'intervalle qui la suit. Ici, une demande d'entrée dans le journal des quarts de travail renvoie une description avec une citation 0:12 — 0:20. Le lecteur peut revenir à ces huit secondes au lieu d'accepter un compte rendu de l'ensemble de l'enregistrement.
Réponse enregistrée · extrait
La zone d’emballage et de tri fonctionne normalement, avec plusieurs convoyeurs et bras robotisés en état de marche comme prévu.
Intervalle source0:12–0:20
Un événement absent de l'intervalle cité peut apparaître ailleurs dans la vidéo. La source reste disponible pour que le lecteur la vérifie.
Gardez la place disponible
La scène en haut de page est une visite enregistrée d'un lieu capturé en 3D. La caméra le parcourt et révèle ses détails comme ses zones incomplètes. La scène reste disponible après la capture.
Les chercheurs peuvent inspecter les objets et préparer des scènes pour la simulation. La fidélité physique, notamment l'échelle et le comportement des matériaux, reste à valider pour l'expérience visée.
Une mémoire qui se prolonge
Revenez à une observation ou réutilisez un environnement préparé pendant que se précise l'expérience suivante. La page produit décrit les capacités actuelles et présente la démonstration enregistrée.
re1 est en cours de développement et des aperçus techniques sont disponibles. Nous travaillons à la création d'une mémoire qui aide les chercheurs à revisiter leurs expériences, à créer des artefacts de simulation utiles et à améliorer les données disponibles pour la entraînement en matière de politiques.
DÉTAILS DU PRODUIT
re1
Mémoire vidéo persistante, reconstruction de scènes et ressources de simulation pour la recherche en IA physique.