3.3 如何亲手拟合一条扩展律(IsoFLOP)#

扩展律的常数并非普适物理常数,而是在特定架构、数据与分词器上,通过一组小规模训练实验拟合并外推得到的曲线;IsoFLOP(等算力剖面)是最主流的拟合方法。

登录后才可看