Simplemente recopilar datos de manipulación no es suficiente para los robots: necesitan poder moverse por el mundo, lo que presenta un conjunto completamente diferente de desafíos en comparación con la manipulación pura. Y unir la navegación y la manipulación en un solo marco es aún más desafiante. Presentamos HERMES, de @fancy_yzc y @still_wtm. Este es un proceso de cuatro etapas en el que se utilizan videos humanos para establecer un pipeline de entrenamiento RL sim-to-real con el fin de superar las diferencias entre la cinemática de los robots y la de los humanos, y se utiliza junto con un modelo de base de navegación para moverse en una variedad de entornos. Para aprender más, únete a nosotros mientras @fancy_yzc y @still_wtm nos cuentan cómo construyeron su sistema para realizar manipulación móvil hábil a partir de videos humanos en una variedad de entornos. ¡Mira el Episodio #45 de RoboPapers hoy, presentado por @micoolcho y @chris_j_paxton!