清华开源PuRo‑2B(普罗‑2B):用消费级RTX5090从零预训练2B基础大模型现在大模型效果持续提升,但从零预训练的硬件门槛依旧居高不下。即便是小参数基础模型,往往需要大量专业机房加速卡,单次训练硬件成本几十万甚至上百万元。 对于高校小课题组、独立研究者而言,算力成本是一道高墙...大语言模型# PuRo‑2B# 普罗‑2B# 清华2个月前670