陈工的说法在当下的工程界确实没错,神经网络训练中确实掺杂着数据读取等细碎的控制操作,这些任务高度依赖cpu强大的通用调度能力和复杂指令处理能力。
这也是为什么,如今不管是大厂还是高校,大家都老老实实地守着cpu训练。
他意识到,所有人似乎忽略了一个最基础的数学事实!
神经网络的核心算力消耗,从来不是那些细碎的控制流操作,而是海量的矩阵乘加运算!
也就是说,标准答案≠正确答案!
业界所有人都错了!
推荐阅读:少年阿滨文全 每天激情时(高H、NP) 少妇之白洁 淫男乱女 刮伦小说大全 最美儿媳 故事会(乱伦篇) 盲人按摩师 苏倩 白洁(完整版) AV拍摄指南
新书推荐:我的心动女邻居 前锋 青云仕途:从被贬下乡开始 阎王下山 诡异降临:从幼儿园开始生 四合院之将截胡进行到底 夜里越界 华娱:满级导演但歌手出道 娇娇她恶贯满盈,众卿争当裙下臣 重生1999,我在医院攒功德