Apenas coletar dados de manipulação não é suficiente para robôs – eles precisam ser capazes de se mover pelo mundo, o que traz um conjunto totalmente diferente de desafios da manipulação pura. E reunir navegação e manipulação em um único framework é ainda mais desafiador. Entra o HERMES, de @fancy_yzc e @still_wtm. Este é um processo em quatro estágios no qual vídeos humanos são usados para montar um pipeline de treinamento RL sim-para-real para superar diferenças entre cinemática robótica e humana, e usados junto com um modelo de navegação para se movimentar em diversos ambientes. Para saber mais, junte-se a nós como @fancy_yzc e @still_wtm nos conte como eles construíram seu sistema para realizar manipulação móvel e ágil a partir de vídeos humanos em diversos ambientes. Assista ao Episódio #45 do RoboPapers hoje, apresentado por @micoolcho e @chris_j_paxton!

Robôs ambulantes podem fazer todo tipo de coisa empolgante como dançar, correr e praticar artes marciais — mas para serem úteis, precisam ser capazes de usar as pernas para lidar com o terreno, para se mover sobre obstáculos e não apenas ao redor deles. Então, como podemos treinar melhor políticas de caminhada para robôs com pernas? @ChongZitaZhang fala conosco sobre como. Assista ao Episódio #43 do RoboPapers, apresentado por @micoolcho e @chris_j_paxton, agora, para saber mais.

Com dados suficientes, os robôs e a IA podem aprender "modelos de mundo" que lhes permitem prever os resultados de suas ações. Esses modelos são uma maneira de aprender como os agentes de IA incorporados podem executar uma ampla variedade de tarefas úteis, mas exigem uma grande quantidade de dados. A equipe da General Intuition @gen_intuition tem uma solução: use dados de videogames! Os jogos ensinam movimento, resolução de problemas e raciocínio espacial complexo, e vêm em uma diversidade impressionante de formas, cobrindo uma ampla variedade de problemas. Além disso, os dados capturados são de alta qualidade, sem o ruído ou erro de anotação que pode vir de Conversamos com @PimDeWitte e @AdamJelley2 da equipe da General Intuition para aprender mais sobre sua história, seus planos e sua filosofia.