视界里只剩干净的蓝色。
等这些工作都做完,关掉视界时,已是凌晨两点。
他看了看最终的数据清洗报告。
原始数据的有效留存率从赵文渊先前标注的41%降到29%。之前的41%其实不准,里面还混着不少低质量垃圾数据;现在的29%却是准确的。
同时,误杀率从12%降到不足3%,被旧管线错杀的一批好数据也救了回来。
清洗后的数据质量提升了,速度也快了不少,耗时大约只有先前的一半。
韩路一给赵文渊发消息,把改好的脚本和清洗报告一并传了过去。
“文渊,你明天试试这版。我做了几项修改,效果应该比之前好。”
时间这么晚,他本没指望接到回复;没想到过了一会儿,赵文渊的信息就来了:“你还没睡啊?”
紧接着是第二条:“我看看。”
又过半小时,赵文渊发来一条长信息:
“韩总,你是怎么一晚上搞出来这个的?一般团队光迭代这条清洗管线就得两三个月,你刚发我的这版,有效率和误杀率都比行业基准优秀!按这个效率和精度,全量数据清洗大概一周能跑完!一周后就能开始预训练!两个月就能看见第一版模型了!”
难得赵文渊发这么多感叹号。有这么高质量的原始数据和标注数据,他实在太期待看到训练结果了。
不过这时韩路一已经睡了。
……
时间往回拨十几个小时,太平洋另一边。
美国太平洋时间。
12月27日,周日下午。
硅谷洛斯阿尔托斯山,约翰的房子就在这里。
约翰·斯诺(johnsnow)是nexusai的cto。
ceo瑞恩拥有人工智能领域博士学位,还一路在ai研究院工作;约翰则不同。