公举小说网

手机浏览器扫描二维码访问

第15章 林你知道吗你正在改变世界(第2页)

马库斯眼中闪过一丝兴奋,他直觉林枫正在讲述的东西,可能会是未来突破深层神经网络训练的关键。

林枫笑了笑,点了点头。

正是“反馈机制”

的概念让残差网络得以解决深度神经网络中的许多瓶颈。

林枫继续说道:“这套结构让信号能够通过短路或捷径返回到较浅的层,减少信息丢失,同时保持梯度的大小,确保网络不会在深度增加时失去学习能力。

其实你们可以试着在更复杂的网络中引入这种结构,我相信会看到意想不到的效果。”

马库斯默默点头,仿佛意识到了一条前所未有的道路。

“不过你说的这些,”

马库斯沉吟片刻,“听起来非常前卫。

我们现在的技术,尤其是硬件算力的限制,可能还不足以支撑如此复杂的网络结构和跳跃式的连接方式。”

“的确,”

林枫对此并不感到意外,“当前的硬件环境还有限制,特别是gpu算力不足,限制了深度学习网络的规模。

不过这些并不是问题,软件技术的发展会推动硬件的进步。

随着并行计算技术的进步,未来会有专门为ai设计的硬件,比如tpu(张量处理单元),它们可以显着提升训练效率。”

为了避免泄露过多,林枫只提到了张量处理器。

其实未来的变化远不仅于此。

在未来,还会有更多高效的优化算法,像ada优化器会成为主流……尽管林枫只是透露一点半点,以对未来猜测的形式说出来。

但这已经足够让马库斯无比震惊了。

“tpu?”

马库斯皱眉,他从没听说过这个名词,“这是新的硬件架构?”

林枫轻描淡写地补充道:“只是一种假设性的计算架构,未来可能会出现,专门针对深度学习任务,你不觉得针对人工智能深度学习有开发一种专门硬件的必要吗?”

马库斯若有所思地点头,脑海中突然涌现出无数思考的路径。

不得不承认,林说得确实有道理,而且从种种迹象来看,像是google确实是在致力于开发一种专门用于人工智能的硬件,至于是不是叫做张量处理器,马库斯就无从得知了。

不过马库斯已经是受益匪浅了,虽然林枫描述的这种依托跳跃式连接对于普通的电脑来说肯定是做不到的,硬件跟不上。

但对于实验室环境下实现硬件支持还真不是什么难事,一些美国高校能调动的资源超乎你想象。

马库斯决定回去就实验一番。

林枫看着马库斯那若有所思的郑重神情,心里忍不住暗笑。

他清楚自己随口透露的这点信息,足以让这个时代的研究人员在未来几年迎来爆发式的进步。

不过,对于林枫来说,这不过是习以为常的知识而已。

但马库斯却无比正式地说道:“林!

你知道吗?你正在改变世界!”

:()不朽从二零一四开始

热门小说推荐
官途:权力巅峰

官途:权力巅峰

官场如战场,尔虞我诈,勾心斗角,可陆浩时刻谨记,做官就要做个好官,要有两颗心,一颗善心,一颗责任心。且看陆浩一个最偏远乡镇的基层公务员,如何在没有硝烟的权利游戏里一路绿灯,两袖清风,不畏权贵,官运亨通。...

直上青云

直上青云

性格嚣张的林飞扬走马上任镇委书记当天就得罪了顶头上司,让大领导颜面无存,差点被就地免职,且看这个嚣张到骨子里的家伙如何凭借孙子兵法和三十六计勇闯重重危机,智破层层陷阱,在官场上混得风生水起,扶摇直上…...

误入官路

误入官路

周胜利大学毕业后,因接收单位人事处长的一次失误延误了时机,被分配到偏远乡镇农技站。他立志做一名助力农民群众致富的农业技术人员,却因为一系列的变故误打误撞进入了仕途,调岗离任,明升暗降,一路沉浮,直至权力巅峰...

权力巅峰:从城建办主任开始

权力巅峰:从城建办主任开始

官场是什么?官场是权力的游戏。官场远比江湖更为险恶。千帆竞渡百舸争流!跨过去那就是海阔任潮涌风劲好扬帆!官场的规矩是什么?正确就是官场的最大规矩!重活一世。刘项东洞悉一切。他不仅能正确,还会一直正确下去!重生是风自身为鹏大鹏一日同风起,这辈子,我刘项东要扶摇直上九万里!...

官路扶摇

官路扶摇

前世被当副镇长的老婆离婚后,崔向东愤怒下铸成了大错,悔恨终生!几十年后,他却莫名重回到了这个最重要的时刻!他再次面对要和他离婚的副镇长老婆,这次,他会怎么做?...

九份婚书:我的师父绝色倾城

九份婚书:我的师父绝色倾城

简介我叫江羽,本想一直留在山上陪着我的绝色师父,却被师父赶去祸害未婚妻了。而且多少?九份婚书!?...

每日热搜小说推荐