第995章 十五亿参数终于横空出世

作者:黑狗不爱吃汤圆 加入书签推荐本书

双十一前夕,九章算力基地。

地下二层的核心机房里,新增的液冷机柜已经占满两条走廊。

状态灯整齐闪烁,冷却液沿透明管线持续循环,室内温度稳定在二十二度。

过去四个月,九天实验室的扩张速度快得吓人。

后续采购的显卡也在陆续到货。

楼天城带队重写了通信框架,终于将张量并行从实验代码变成可用系统。

与此同时,实验室又多了五十多名研究员。

其中既有刚从海外实验室辞职回来的华人学者,也有被论文吸引来的年轻博士,还有几个拒绝了互联网大厂高薪,只想专心研究模型的技术怪人。

公司给出的条件相当直接。

算力不设个人额度,论文允许公开发表,研究成果按贡献署名。

只要项目需要,实验设备的采购申请可以直接越过普通财务流程。

任少卿站在主控制台前,双眼盯着屏幕上的训练日志。

十五亿参数的天问二号已经连续训练十九天。

最后一个训练周期在凌晨结束,现在团队正在进行模型权重合并和完整性校验。

楼天城坐在旁边,桌上放着两罐空咖啡。

他盯着通信监控页面,手指不断敲击键盘。

“第六组节点完成合并。”

“第七组正常,没有出现权重损坏。”

安德烈坐在另一侧,快速核对验证集数据。

“损失函数已经稳定。”

“通用语料困惑度比天问一号下降百分之三十七。翻译和长文本续写的效果,提高得更明显。”

上一章 返回目录 下一页