Mistral verkar vara på väg att släppa två nya modeller: Ministral 3 och Mistral Large 3. Arkitektoniskt verkar det vara: > exakt samma som llama2/3 för Ministral, som är väldigt lik (även om de lägger till SWA) den första Mistral 7B-utgåvan för 2 år sedan. > exakt samma arkitektur som DeepSeek V3 för den stora (som verkar vara en MoE) för båda använder de också llama4 rep-skalning (istället för garn), och för den stora verkar de implementera spekulativ avkodning med eagle Länk till PRS i tråden