Smooth DiLoCo: (@aaron_defazio et al.) Ikke-distribuert alternativ, med mindre minneoverhead (bare én ekstra buffer) og en kontinuerlig oppdatering i stedet for den periodiske (ganske voldsomme) ytre oppdateringen til klassisk DiLoCo Nysgjerrig på å se utvidet til distribuert!