Ten REPL nie jest jak cokolwiek, co widziałeś wcześniej. Działa na sieci neuronowej. To sieć feed forward, wykorzystująca uwagę, i implementuje w pełni działający interpreter wasm. Kiedy zobaczyłem artykuł na temat interpretacji wasm w llm, musiałem to zbudować. Wasm + technologia stojąca za AI + repl … działająca w przeglądarce i zbudowana oraz wdrożona na Replit - to hołd dla @amasad, jednego z moich osobistych bohaterów 🐐 Pomysł oparty jest na niedawnym poście @PerceptaAI, ale nie dostarczyli architektury modelu ani żadnych ważnych szczegółów implementacyjnych, więc musiałem dużo odkrywać i testować z agentem Replit, aby to zbudować - to niesamowite, że AI może to wyprodukować - architektura sieci neuronowej z ręcznie wykonanymi wagami, aby zaimplementować coś zbyt nowego, aby znalazło się w jakichkolwiek danych treningowych. P.s. wszystko zostało zrobione na moim telefonie, większość z tego podczas lotu z SFO do Monachium, co za czas, aby żyć!