När jag tittar på artiklarna igen gissar jag att GSPO och CISPO härleddes på grund av det numeriska helvetet med stora MoE RL, och det förklarar varför man på enklare uppsättningar ser mindre nytta av dem