兄弟,这是2024年公平会议上的一篇论文,Llama 2/3是由GenAI开发的(不是同一个集群,代码库等……)他们在MFU/吞吐量方面比其他实验室在这个规模的训练模型更透明,并且在Llama 3的论文中有实际的数据。