Jag hade full autonom RL-driven flygning fungerande ~ för 2 veckor sedan, och vid något tillfälle försvann den. Jag fixade det liksom. Fyra riktigt, riktigt hemska buggar innan det började fungera igen. faktiskt skrämmande. skulle verkligen återgå hårdvara + neurala nätverk är faktiskt riktigt svårt

Det galna var att det faktiskt fortfarande fungerade, jag menar policyn. Om jag kisade kunde jag se de degenererade beteenden som skulle leda till misslyckande. där grundorsaken var en fruktansvärd, fruktansvärd bugg (vänster och höger sensor bytte plats i observationerna!)

Jag brukade undra: kanske borde jag ha börjat med RC-bilar istället för RC-multirotors – men jag är glad att jag valde multirotors. RC-bilar hade varit för förlåtande, och min infrastruktur skulle inte behöva vara lika bra som den är idag

Jag behöver sätta mig ner och tänka väldigt, väldigt noga på mitt end-to-end-test. Det ideala scenariot vore ett end-to-end-test där jag har fysiksimuleringen, tränaren kör och flera faktiska fysiska multirotorer som skjuts upp och testas automatiskt i ett mörkrum

Problemet jag har är mest att min hårdvaruinfrastruktur förändras så snabbt. Varje vecka har jag en ny multirotorram, ny styrprogramvara, ny firmware för tvåvägs kommunikationslänk, nya sensorer...

Smärta

faktiskt är det planen för QA ändå. Lika bra att bygga det förr än senare

@BigwetRealism med RL har jag blivit förvånad; Den kommer att lära sig strategier för att samla information om världen i sitt dolda tillstånd innan den utnyttjar den. verkligen vilt

@BigwetRealism anledningen till att folk inte gör RL är för att de suger. De vill inte spendera fyra månader på att skriva simuleringar i CUDA från grunden

@BigwetRealism jag är ärligt talat tidsbunden. Jag har så lite tid

@BigwetRealism det finns så många vetenskapliga saker jag vill prova. Jag behöver bara bygga infrastrukturen, sälja något och sedan anställa folk som kan hjälpa mig med det

@BigwetRealism en datapunkt för dig Mitt största problem är modelleringsfysik Det som skulle hjälpa mig mer än nya sätt att lära sig beteenden är nya sätt att lära sig miljön