CCTest · Blog
Agora:把互联网闲置 GPU 变成大模型预训练集群
开源生态
cctest.ai
Agora:把互联网闲置 GPU 变成大模型预训练集群
Agora 试图证明,大模型预训练不必完全依赖封闭数据中心。它通过互联网级链路上的流水线并行、容错协同和模型分片,让分散的消费级 GPU 参与 8.6B 参数模型训练。
阅读全文Agora 试图证明,大模型预训练不必完全依赖封闭数据中心。它通过互联网级链路上的流水线并行、容错协同和模型分片,让分散的消费级 GPU 参与 8.6B 参数模型训练。
阅读全文Mira Murati 创立的 Thinking Machines Lab 推出首个自研开放权重模型 Inkling,试图用可下载、可微调的路线挑战通用闭源大模型。它不宣称性能最强,而是把企业定制、成本效率和不确定性表达放在核心位置。
阅读全文