DiLoCo Halus: ( @aaron_defazio et al) Alternatif yang tidak terdistribusi, dengan overhead memori yang lebih sedikit (hanya satu buffer tambahan) dan pembaruan berkelanjutan alih-alih pembaruan luar periodik (agak keras) dari DiLoCo klasik Penasaran untuk melihat diperluas hingga didistribusikan!