江松然和赵文渊这两位从美国回来的高级人才且不论,薛兆恒倒是比较守老派饭局的规矩——只是来到起源后,他专注研发岗位,参加这种饭局的机会也少了。
这位芯片部门副总裁起身对韩路一说:“韩总,我敬您一个,感谢您把我们部门这么大的危机给扛了。”说完,一口干了杯中的茅台。
江松然和赵文渊这才后知后觉,觉得自己是不是也该表示表示。
韩路一看了看几人的反应,有点儿哭笑不得,和老薛把杯中酒喝了,赶紧嘱咐道:“老江、文渊,咱们今天都是自己人,内部庆功,就别搞这些形式主义了;大家想喝就喝,喝不了也不用强求。”
真论酒局经验,做过多年合伙人的宋嘉宁或许比薛兆恒还丰富些,只是她仍在观察大老板的风格。如今韩路一发话,她便低头安心吃菜,偶尔和身边的苏念念,以及再旁边的顾司玥说两句话。
没了白酒热场,大家到底都是朝夕相处的同事,很快便聊开了。一群人坐在一起,话题又很快转到技术上;尤其L200的研发进度,是江松然和赵文渊共同关心的。
江松然半开玩笑地开口:“从现在的进度看,月底把设计敲定,流片应该不会耽误,老赵你那边的算力很快就能富裕起来啦。”
赵文渊叹了口气,说:“老江,江总,我知道你筹措算力不容易,可你这饼我吃不下了。别的不说,你现在再多匀我五千张L100,汤圆2.0的训练进度都能快不少。”
江松然脸色一变,不吭声了。
给你一万张L100已经是榨干了,还要五千张,你可真敢要。
韩路一打断两人的互动,问:“文渊,2.0的进度怎么样了?”赵文渊是突然被他从京城叫来的,到现在还没正经汇报过。
赵文渊此时已喝了几杯白酒,脸色酡红;说起研究进度,脸上露出些激动神色。
“研究团队有些特别的想法,我觉得很有趣,趁这次机会都加进了预训练。最主要的调整在模型架构上——”
赵文渊放下筷子,举起双手比划了一个圆,接着说道:“业内不是一直说,模型参数越大,模型能力越强,可需要的算力也越多吗?我们的算力一直不够用,就探索了一个新方向:让参数量继续增长,但每次实际参与计算的参数量不必跟着增长。”
“MoE架构?这个你之前不是说过吗?”韩路一问,“汤圆1.0现在已经是MoE架构了吧?”
赵文渊露出些许得意,说道:
…。。本站若有图片广告属于第三方接入,非本站所为,广告内容与本站无关,不代表本站立场,请谨慎阅读。
Copyright © 2020 二零小说 All Rights Reserved.kk