Raccogliere semplicemente dati di manipolazione non è sufficiente per i robot - devono essere in grado di muoversi nel mondo, il che presenta un insieme completamente diverso di sfide rispetto alla pura manipolazione. E unire navigazione e manipolazione in un unico framework è ancora più impegnativo. Entra in gioco HERMES, di @fancy_yzc e @still_wtm. Questo è un processo in quattro fasi in cui vengono utilizzati video umani per impostare un pipeline di addestramento RL sim-to-real al fine di superare le differenze tra la cinematica dei robot e quella umana, e utilizzato insieme a un modello di base per la navigazione per muoversi in una varietà di ambienti. Per saperne di più, unisciti a noi mentre @fancy_yzc e @still_wtm ci raccontano come hanno costruito il loro sistema per eseguire manipolazione mobile e abile da video umani in una varietà di ambienti. Guarda l'Episodio #45 di RoboPapers oggi, ospitato da @micoolcho e @chris_j_paxton!