tive um voo totalmente autónomo alimentado por RL a funcionar há cerca de 2 semanas, e em algum momento, isso foi perdido. Corrigi tipo. 4 bugs realmente, realmente horríveis antes de começar a funcionar novamente. realmente aterrador. estava genuinamente a pensar em reverter hardware + redes neurais é realmente muito difícil

a coisa insana era que ainda funcionava, quero dizer, a política. tipo, se eu apertasse os olhos, poderia ver os comportamentos degenerados que culminariam em falha. onde a causa raiz era um erro horrível, horrível (sensores esquerdo e direito trocados nas observações!)

Eu costumava me perguntar: talvez eu devesse ter começado com carros RC em vez de multirotores RC - mas estou feliz por ter escolhido multirotores. Os carros RC teriam sido muito indulgentes, e minha infraestrutura não precisaria ser tão boa quanto é hoje.

Preciso sentar-me e pensar muito, muito cuidadosamente sobre o meu teste de ponta a ponta. O cenário ideal seria um teste de ponta a ponta onde tenho a simulação de física, o treinador em funcionamento e vários multirotores físicos reais a serem lançados e testados automaticamente numa sala escura

O problema com que estou a lidar é principalmente a rápida mudança da minha infraestrutura de hardware. Todas as semanas tenho um novo quadro de multirotor, novo software de controlo, novo firmware de ligação de comunicação bidirecional, novos sensores..

Dor

na verdade, esse é o plano para QA de qualquer forma. é melhor construí-lo mais cedo do que mais tarde

@BigwetRealism com RL fiquei surpreendido; ele aprenderá estratégias para coletar informações sobre o mundo em seu estado oculto antes de o explorar. realmente selvagem

@BigwetRealism a razão pela qual as pessoas não estão fazendo RL é porque elas são ruins. Elas não querem passar 4 meses escrevendo sims em cuda do zero

@BigwetRealism estou honestamente limitado em tempo. tenho tão pouco tempo

@BigwetRealism há tantas coisas científicas que quero experimentar. Só preciso de construir a infraestrutura, vender algo e depois contratar pessoas para me ajudar com isso

@BigwetRealism um ponto de dados para você meu maior problema é modelar a física o que me ajudaria mais do que novas maneiras de aprender comportamentos são novas maneiras de aprender o ambiente