OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 《人民司法》2024年第19期目录

责任编辑: 安璃

发布时间: 2024-09-20 16:29:48

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

美国WTI原油下跌超过2%卡塔尔首相敦促伊朗推迟对以色列的袭击

2

狂飙兄弟回应乔菲

3

一市政府副市长,被查

4

四川内江:初秋收获忙

5

中老缅泰外长举行非正式会晤

6

婺城区政协召开专题议政性常委会

7

运河之舟讲习所启航:讲好运河故事弘扬运河文化

8

青海加力推动大规模设备更新和消费品以旧换新

9

4月5日以来"

10

王毅谈澜湄合作下阶段发展

11

攻克“禁区”!全国首条山地轨道交通最难“啃”盾构区间贯通

12

旅德大熊猫怀双胞胎

13

8月17日凌晨,国际传来11个新消息,局势发生了翻天覆地的变化!

14

普京向金正恩请求援助,检验两国条约成色的时候到了

15

马尔代夫外交迷局:中印竞争新前沿

16

越共总书记将访华

17

联合国机构:也门暴雨引发洪水逾18万人受灾

18

美国国务院批准向加拿大出售战术导弹

19

大转变!乌军攻入俄罗斯的第七天,美国才意识到:有三个没想到

20

英特尔暴跌逾26%

21

惊天大新闻!

22

国家市场监督管理总局:国家企业信用信息公示系统日均访问量突破1.31亿人次

23

利比亚油田停产时间延长美国石油销售并未获得多大提振

24

美国《大西洋月刊》:美国婚恋市场向“钱”看,“找个金融男嫁了吧”

25

卡塔尔首相与伊朗代理外长通电话讨论地区局势

26

顾客4S店购车遭辱骂

27

巴基斯坦报告3例新增猴痘感染病例

28

河南新野:构筑“四维度课堂”体系提升干部教育培训质效

29

拜登法案执行不顺,超250亿锂电项目被迫暂停!

30

众议员比尔·帕斯克雷尔住院四周今终出院

31

波兰总理:波兰将申请举办奥运会

32

热点问答|三问“北溪”爆炸调查新进展

33

嚣张的外国黑人坐车不给钱,声称所有人都要服务他

34

22年3月19日

35

特朗普:别劝我,我有权对她人身攻击

36

中国电商借巴黎奥运开拓法国市场

37

阿富汗最大的铜矿项目正式开搞!有人哭晕在厕所~

38

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

39

中老缅泰外长举行非正式会晤

40

拜登还没有下台,针对中国的三个法案,都出现了问题

20

海南公安宣讲会走进海口铁路公安处

20

筑梦知识产权蓝海共绘法治护航篇章

20

武大靖为樊振东加油

20

这定位器有点多余了

20

突发!建设银行邵茂丰被查,年内建行已有多名干部落马

20

高质量发展调研行丨福建:画好山水画,探索“点绿成金”新路径

20

5人被查,3人被处分

20

高效养猪新视角:优化日粮配比,助力生猪快速生长

20

市场监管总局:正研究制定《个体工商户促进发展和规范登记管理规定》

热门攻略

1

男子结婚22年胖30斤

2

中国管制锑出口美西方强烈反应暴露了什么?

3

黎智英案细节曝光,监狱成最终归宿,陈方安生与李柱铭何时收监?

4

"美国议员坐不住了!罕见表态!

5

营造更加安全有序的文旅市场环境让广大游客安逸游四川

6

俄罗斯外交部抗议亚美尼亚新版历史教科书“歪曲”历史

7

孙杨参加明年全运会

8

孟加拉国动荡,冲击全球服装产业链

9

多米尼加总统阿比纳德尔宣誓就职

10

时政眼|打造硬“核”实力,山东如何迎头赶上?

11

巴拿马运河管理局再次提高运河通行能力

12

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

13

巴黎残奥会中国体育代表团成立参加19个大项302个小项角逐

14

社会类:入围奖-《巴尔斯》

15

清远佛冈:探索“AI+检察”履职新路径,为司法工作插上智慧翅膀

16

豪车被撞定损406万

17

世界卫生组织:苏丹霍乱疫情已致316人死亡

18

莫迪抵达莫斯科,开始对俄进行访问

19

台湾宜兰5.4级地震

20

菏泽市市场监管局机关第二党支部到“双报道”社区联合开展主题党日活动

20

“非常罕见!”日媒发现韩国总统尹锡悦“光复节”竟这么做

20

英国首相斯塔默去酒吧消费,被老板赶了出来:我的酒吧不欢迎你!

20

金门地检署16日公布“2·14”撞船事件调查结论国台办:罔顾事实推卸责任不能接受

20

吃山竹被蝎子咬伤

20

天气预报#一起关注天气变化

20

史正章:我和青藏公路同生共长

20

《人民法院报》:上海成立邮轮法律合作发展共同体

20

未办环评审批手续擅自开工,山西陆合集团恒泰南庄煤业被罚21.7万元

20

杨昊10米台预赛失误

20

大陆祭出“杀招”,赖清德赴美“求救”,马英九一举引爆两岸舆论

20

潘展乐告状汪顺告白

20

婚登取消户口簿会致重婚?民政部回应

20

女子坠亡男友拍照

20

自称长得好看不排队

20

中澳高级别对话第八次会议在阿德莱德举行

20

1分钱难倒英雄汉,普京意识到离不开印度,还是致电对莫迪服了软

20

华润原总经理去世

20

岚山区金融调解中心在岚山农商银行揭牌

20

“80后”副市长王巍,被查

20

“业委会”所涉典型行政诉讼简评

20

小伙地铁遭老人暴打

20

18岁上岸省监狱系统

20

涡阳县延伸产业链打造“涡臻鲜”农业品牌

20

中国再三要求下,惊天大案有了新进展,德国找到铁证,发出逮捕令

20

银昆高速太彭段建成通车

20

德国女作家首获国际布克奖!历史事件与个人意志的交汇

20

中美已经谈妥?中国增持152亿美债,拜登派人给中方传话

20

热门游戏

  • 1
    《国家的力量》:东西部协作的成功密码

    射击枪战 /热度:78958

    点击下载

    拜登法案执行不顺,超250亿锂电项目被迫暂停!

  • 2
    张本智和颗粒无收

    射击枪战 /热度:78829

    点击下载

    铜仁中院召开2024年8月审判质效工作调度会

  • 3
    文化中国行丨被誉为“地下水长城”的坎儿井有何奥秘?

    射击枪战 /热度:26495

    点击下载

    结婚登记数再创新低

  • 4
    崩坏3 临夏市公安局召开常态化扫黑除恶斗争推进会

    射击枪战 /热度:39659

    点击下载

    成都老人种出53年“昙花王”,一次开花数百朵,那叫一个壮观!

  • 5
    原神 切实发挥干部考核的“指挥棒”作用

    射击枪战 /热度:68628

    点击下载

    [学习贯彻党的二十届三中全会精神]以更优服务促进民营企业大发展

  • 6
    出发吧麦芬 卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

    射击枪战 /热度:70302

    点击下载

    中山一地发生命案

  • 7
    永劫无间手游 换功德箱二维码被抓

    射击枪战 /热度:41123

    点击下载

    湖南东安县:“双线并行”遏制“舌尖上的浪费”

  • 8
    向僵尸开炮 “80后”副市长王巍,被查!上个月还曾公开露面

    射击枪战 /热度:95720

    点击下载

    打头骨老师当庭翻供

  • 9
    鸣潮 英国政坛,八年六相,谁之过?专家:保守党的无奈和困局

    射击枪战 /热度:24977

    点击下载

    他信女儿、最年轻总理,标签之下佩通坦能否解泰国政坛困局?

  • 10
    艾塔纪元 小孩骑行被碾压身亡

    射击枪战 /热度:05712

    点击下载

    珠海海事:激发“红色引擎”助力乡村振兴

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏社区活动 | 游戏社区动态 | 体育竞技游戏场 |