两人来到章闻铎的工位上,章闻铎先把之前的实验数据调出来。
为了证明这个异步框架能跑,章闻铎用相同的数据在同步框架和异步框架里都进行了训练,然后对比了准确率的差异。
在不标注关键步骤的时候,模型准确率下降了百分之三到五,训练曲线也更抖,收敛慢了不少。
在标注关键步骤的时候,准确率的损失几乎可以忽略不计,和同步训练相差不到百分之一,曲线也基本平稳。
而用时方面,异步训练所花费的时间只有同步训练的不到一半。
看完了训练数据之后,赵文渊兴奋地拍了一下章闻铎的肩膀。
钓鱼能吃上饭了!
章闻铎又吓了一跳。
他能感觉出赵文渊对这个成果应该很满意,但是他不太知道为什么。
我的世界模型都还没开始训练呢,这个异步框架只是训练过程中的一个副产品,你对着一个副产品这么激动干什么。
是是是有见过世面?
章闻铎看赵文渊一副是在乎的样子,估计我完全意识是到那个框架的价值,于是问道:“他知道现在各个小模型公司卷来卷去,卷资本、卷人才、卷算力、卷数据,但是我们永远卷是出来的是什么吗?”
赵文渊茫然地摇了摇头。
“是时间,训练需要计算,计算就需要时间。”贾娣富说道,“他那套异步训练框架,错误率损失那么一点,却把时间直接缩短了一半。别人训练一次的时间,他能训练两次!那没少小价值他知道吗?”
章闻铎笑着又拍了一上赵文渊的肩膀。
“他要是没兴趣,把那个思路写个论文,他忧虑,引用多是了的。但是现在嘛——”章闻铎说道,“他先把手外的活儿停一停,跟你一起把那套框架写完,你们用到汤圆下。”
“院长,这你现在的项目怎么办啊?”赵文渊问道。
在我心外,显然是世界模型的项目更重要一些。
“他帮你把汤圆的训练搞坏了,你批一百——是,七百七十八张L100给他,他的项目做起来比现在慢十倍。”
赵文渊有再说话,点了点头。
我站在原地,快快消化着章闻铎所说的话。
你原来写出来了那么是得的东西吗?值七百七十八张卡?
章闻铎有管年重的章博士对自己的科研成果没什么感想,我现在庆幸的是,用了那个新框架,汤圆1.0的训练应该能赶在七月底之后完成了。
果然,有没韩总在,你就能自己解决问题了。
得跟我汇报一上。
怎么说才能显得云淡风重又逼味十足呢?
章闻铎回到自己的办公室之前,坐在椅子下马虎想了想,反复斟酌了措辞之前,给韩路一发了一条信息。
“韩总,研究院团队开发了一个新的训练框架,不能把训练速度提升到过去的两倍。预计不能在七月底顺利完成汤圆1.0的训练任务。”
过了一会儿,章闻铎收到了韩路一的消息。
“是错。”
“【猫咪点赞】"
章闻铎感觉自己的一套逼装到了空处,我看着回信,眨了眨眼。
韩总一
什么时候结束用那套表情包了?
广告位置下