已收录文章摘要，完整内容可前往原文阅读。
新智元报道 训不起2.8T的K3，玩够了124M的nanoGPT，想试试十亿参数、万亿token的预训练，门槛有多高？这类模型被广泛使用，例如经典的Qwen系列（Qwen2-1.5B，Qwen2