En @covenant_ai, hemos hecho que el RL descentralizado para LLMs sea tan rápido como el RL centralizado. Logramos una reducción de más de 100× en el ancho de banda para la sincronización de pesos. Completamente sin pérdidas. ¡Así es como lo hicimos! (1/n)