使用案例厂商宣传2026-09-09 08:00

Dwarkesh Patel 研究:预训练进步主要来自数据改进

Dwarkesh Patel 发布实验分析,在最高 1e19 FLOPs 的算力预算下训练 2019 至 2025 年各年度代表性模型配方与数据语料,发现数据改进带来 12.0x 算力效率提升,模型改进为 3.7x,数据贡献约为模型的 3.24 倍。

来源

D

Dwarkesh Patel:Podcast & Blog(RSS)

dwarkesh.com

收录于 2026-10-15 23:55

打开原文 ↗

本页是 RebornArk 收录的摘要与标注,不是原文转载。完整表述以来源页面为准。

同一来源的其他动态