Aveam zbor full autonom RL funcțional acum ~ 2 săptămâni și, la un moment dat, s-a pierdut. Am reparat. 4 bug-uri foarte, cu adevărat groaznice înainte să înceapă să funcționeze din nou. chiar înfricoșător. chiar voia să revină Hardware + rețele neuronale este de fapt foarte dificil

Lucrul nebunesc a fost că de fapt încă funcționa, adică politica. Adică, dacă mă uitam cu ochii închiși, puteam vedea comportamentele degenerate care ar duce la eșec. unde cauza principală a fost un bug groaznic, groaznic (senzorii stânga și dreapta s-au schimbat în observații!)

Obișnuiam să mă întreb: poate ar fi trebuit să încep cu mașini RC în loc de multirotore RC - dar mă bucur că am ales multirotori. Mașinile RC ar fi fost prea iertătoare, iar infrastructura mea nu ar trebui să fie la fel de bună ca astăzi

Trebuie să mă așez și să mă gândesc foarte, foarte atent la testul meu de la un capăt la altul. Scenariul ideal ar fi un test de la un capăt la altul în care am simulatorul fizic și antrenorul de antrenament, iar mai multe multirotore fizice reale sunt lansate și testate automat într-o cameră întunecată

Problema cu care mă confrunt este în mare parte schimbarea rapidă a infrastructurii hardware. În fiecare săptămână am un nou cadru multirotor, un nou software de control, un firmware nou pentru legătura de comunicare bidirecțională, senzori noi...

Durere

de fapt, acesta este planul pentru QA oricum. Mai bine să-l construiești mai devreme decât mai târziu

@BigwetRealism cu RL am fost surprins; Va învăța strategii pentru a colecta informații despre lumea în starea ei ascunsă înainte de a o exploata. Foarte sălbatic

@BigwetRealism motivul pentru care oamenii nu fac RL este pentru că sunt slabi. Nu vor să petreacă 4 luni scriind simulări în CUDA de la zero

@BigwetRealism sincer, am un timp limitat. Am atât de puțin timp

@BigwetRealism sunt atât de multe lucruri științifice pe care vreau să le încerc. Trebuie doar să construiesc infrastructura, să vând ceva și apoi să angajez oameni care să mă ajute cu asta

@BigwetRealism un punct de date pentru tine Cea mai mare problemă a mea este modelarea fizicii Ce m-ar ajuta mai mult decât noi moduri de a învăța comportamente sunt noi moduri de a învăța mediul