免费阅读
返回
菜单
上一章查看最新章节下一章

第一百一十七章 平台期

作品:首富从看见信息面板开始作者:路大头
如果本章错误,请点击报错10秒纠正

下了,上个月刚扩的。“关门吗?”赵文渊问。

韩路一点点头。

赵文渊用脚後跟把门带上,在沙发上坐下来,打开笔记本,转过屏幕让韩路一看。

屏幕上是一张曲线图。

横轴是训练轮次,纵轴是准确率。五个点标在曲线上,第五个点的数字是

84. 7%。

“第五轮微调训练跑完了,”赵文渊说,“初次生成准确率八十四点七。”

韩路一看着这个数字。

乾元最新公布的基准是85%。

只差0.3个百分点。

“演示看看。”

赵文渊点开几个测试用例,几个使用不同编程语言在不同应用场景下进行的代码生成,生成完之後再放进BugKiller扫一遍,看错误率。韩路一同时打开视界看了看模型直接生成的代码。生成质量确实上了一个台阶。

但赵文渊的表情不像是来报喜的。

他翻到下一页,是一张更详细的曲线。五轮训练的提升幅度标得很清楚:第一轮上次会议分享过了,76.8;第二轮到第三轮,提了5个点;第三轮到第四轮,2.8个点;第四轮到第五轮,0.1个点。曲线在快速变平。

“84.7已经是後训练能做到的极限了,”赵文渊说,“再往上走,就不是加数据加显卡能解决的问题了韩路一看着那条曲线。

他想起上次开会的时候,赵文渊在会议室投屏上放的同一条S形曲线。当时的状况,准确率还处在Scaling Law的前半段。

数据点在曲线的极速上升阶段。

现在数据点走到高原了,大力出奇迹,这招在这不再好使了。

“也就是说,”韩路一的手点在办公桌上,“我们用开源底座做微调这条路,走到头了。”“不是走到头了,是走到平台了。”赵文渊纠正他,“就像减肥,平台期是可以突破的,但是你得换一种方式才能突破。”

“什麽方式?”

赵文渊合上笔记本,从腋下抽出那个本子。韩路一瞄了一眼,牛皮纸封面,上面用黑笔密密麻麻写了一堆英文缩写和箭头,像上学时候的笔记本。

赵文渊翻到其中一页,把本子摊在茶几上。

“三条路。”

他指着第一行。

“第一条,继续走RLHF,强化学习加人类反馈。”

RLHF,Reinforcement Lea

…。。
   本章没完,请点击下—页继续阅读!如果被转码了请退出转码或者更换浏揽器即可。
  温馨提示:亲爱的读者,如果你觉得本站还好,为了避免丢失和转马,请勿依赖搜索访问,建议你使用[华为刘揽器]或[Firefox火狐刘揽器]访问并收蔵【二零小说】 m.20012001.net。我们将会持续为你更新,还建议你注册会员使用书架功能追书阅读更方便。
上一页 123下一页
上一章查看最新章节下一章
临时书架加入书签回顶部↑

看了《首富从看见信息面板开始》的书友还喜欢看

无敌江湖后,我隐退于世
作者:这第七封信
简介: 【不吃牛肉】【无敌】【想干嘛就干嘛】【不压战力】【搞笑】\n少年知意走四方,生死江湖...
更新时间:2026-10-26 21:34:24
最新章节:第218章 给出的许诺
序列公路求生:我在末日升级物资
作者:山海呼啸
简介: 【题材新颖+非无脑爽文+非无敌+序列魔药+诡异+公路求生+升级物资+心狠手辣】\n诡...
更新时间:2026-10-26 21:31:37
最新章节:第1610章 战争,还没有结束
疯批小姐回京后,主母系统失灵了
作者:怀瑾满仓
简介: 众所周知,楚尚书家的大小姐,楚蘅妩是个疯子。在庆阳老宅磋磨了八年。

更新时间:2026-10-26 21:36:00
最新章节:第187章 云州定生乱
从一证永证开始成神
作者:爱吃宵夜的兔
简介: 乱世吃人。弱者连死,都不配留下名字。叶霄出生哑巷,本该和所有‘无名者’一样,活着没人...
更新时间:2026-10-26 21:16:00
最新章节:第631章 威名初显,师门有约
影综,从老九门开始
作者:用户24185143
简介: 张天道,一个意外穿越到民国的现代人,获得地球母亲的馈赠,携带一个小世界,能力是可以触...
更新时间:2026-10-26 21:30:54
最新章节:第103章 陨星塔灭敌,取陨铜。
九帝塔
作者:飞鱼牛牛
简介: 【大神小号】【传统玄幻】【剑道天才】【九大女帝】【微小群像】大乾王朝少年将军,叶玄,...
更新时间:2026-10-26 21:27:02
最新章节:第306章 通天主神,忍不住了
书名:

本站若有图片广告属于第三方接入,非本站所为,广告内容与本站无关,不代表本站立场,请谨慎阅读。

Copyright © 2020 二零小说 All Rights Reserved.kk

SiteMap