ok quindi: engram è moe su memoria ngramed mHC è moe sul flusso residuo NSA è moe su attenzione MoE è moe su FFN ... sento un tema ....
(so che la selezione gated non è _letteralmente_ moe, ma suona meglio dirlo in questo modo)
204