OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 据报道8月16日,韩国政坛迎来重大新闻:"

责任编辑: 庄思

发布时间: 2024-09-20 05:56:12

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

微视频|绿水青山间

2

通知书切西瓜不怕烧

3

蚌埠市人大常委会原党组成员、副主任汤春义被查

4

他信和泰国军方又撕破脸了?37岁女儿出任泰国最年轻总理

5

省交通运输厅工程建设事务中心调研地铁5号线智慧工地一体化建设

6

云南两地发布一批任免职名单

7

北京十大律师事务所:法律界的璀璨明星

8

青龙实施“三个强化”提升编制管理水平

9

聊城大学青年学生讲师团走进泰安市开展走访调研活动

10

孙志刚敛财8.13亿

11

携手共建美丽家园

12

这一次"

13

统一时机来了?赖清德当众“搞事”?拜登抢先给出重磅一击

14

日本发生7.1级地震

15

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

16

滨州网事早知道(8.17)

17

中国电信圆满完成全国生态日主场活动通信保障任务

18

孙杨谈美游泳队脸紫

19

2024年7月份,日本计划援助乌克兰20台排雷机首批4台已运抵库尔斯克边境地区。

20

2024“走进政协·台湾青年说”活动福州举行

21

吴艳妮给首秀打0分

22

中央气象台:17日起北方地区将迎来一次持续时间较长的降雨过程

23

国台办:台公布的恶性撞船事件“调查结论”罔顾事实,我们不能接受

24

快写人物|佩通坦·钦那瓦:“爽文女主”又换新剧本

25

滨南采油厂减重大赛享“瘦”健康

26

今年超50家银行解散

27

张本美和谈对战中国

28

2023年度“中国十大环境司法案例”公布,宜昌检察一例入选!

29

王楚钦输球找回自己

30

戴上眼镜探鼓楼坐着巴士游中轴

31

580余家媒体集中发布这一报告

32

刘翔含金量还在提升

33

开除员工称法无所谓

34

又一高官落马!唐山4个月已有11位省干部落马

35

美媒称乌克兰团伙实施“北溪”管道破坏俄大使谈“北溪”事件:美试图将全部责任推给乌克兰

36

22年3月19日

37

全红婵全家住进果园

38

一首《共和国之恋》,失明小伙唱出对祖国的深情

39

美国正利用“亚速营”,完全解除武器限制,不分善恶都要利用

40

沧州多地计生协开展科学育儿大讲堂活动

20

菲律宾海警船在仙宾礁潟湖非法滞留,外交部回应

20

热点问答|三问“北溪”爆炸调查新进展

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

邓亚萍解析女单决赛

20

天气预报#一起关注天气变化

20

浙江人再忍8天

20

火炬中心启动2024年火炬科技成果直通车工作

20

俄罗斯称美国试图把“北溪”天然气管道被炸的全部责任转嫁给乌克兰俄方致力于找出真正的肇事者并予以惩...

20

哈里斯经济议程聚焦降低成本提议补贴首次购房者2.5万美元

热门攻略

1

香港文体旅局答南都:已签署合作协议书落实大熊猫赴港安排

2

常德市市场监管局召开市场准入、维护市场秩序工作调研座谈会

3

女子坠亡男友拍照

4

美国又现暴力执法

5

特朗普和高龄粉丝互动:你真美你看起来也就60多岁高龄女粉丝:我快100了

6

王楚钦输球找回自己

7

罗马诺:桑乔未来悬而未决,夏窗关闭前仍可能会发生一些事情

8

也门南部自杀式袭击死伤人数升至34人

9

哥伦比亚中部一商业区发生火灾多处商业场所被毁

10

潘展乐从7追到第2

11

拜登法案执行不顺,超250亿锂电项目被迫暂停!

12

婚登取消户口簿会致重婚?民政部回应

13

45秒92不算世界纪录

14

市级领导干部人大代表赴代表联络站接待基层代表和群众

15

突发,乌克兰果然对克里米亚大桥出手了,可惜没成功!

16

龙岩市领导会见出席“龙岩人才活动周”的院士专家

17

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

18

福建省人民政府领导成员最新分工公布

19

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

20

多米尼加总统阿比纳德尔宣誓就职

20

乌克兰总统顾问波多利亚克发文表示,乌克兰对占领俄领土不感兴趣。库尔斯克地区的

20

这定位器有点多余了

20

缺席重要会议的市委原书记,被查了

20

又有两名政界人士可能加入日本自民党党魁角逐

20

土耳其伊兹密尔省发生森林大火部分地区大火逼近居民区

20

18岁上岸省监狱系统

20

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被开除党籍和公职

20

佳能苏州辟谣裁员

20

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

20

约旦谴责以色列定居者袭击约旦河西岸村庄

20

广湛高铁广佛段顺利完成首梁浇筑

20

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

20

中老缅泰外长举行非正式会晤

20

联合创始人11变2,OpenAI高层出走背后

20

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德国经济损失

20

英国警告马斯克,称网络不是法外之地

20

朱亚明晋级跳远决赛

20

非洲联盟驻华代表到访南宁畅谈合作前景

20

《青海省加力推动大规模设备更新和消费品以旧换新实施方案》出台

20

在台海摊牌之前,美国挑衅联合国2758号决议,中国反击手段

20

广东省云浮市政府党组成员、副市长王巍接受审查调查

20

残奥运动员最小15岁

20

「图解」聚焦高质量发展市场监管取得五大成效

20

南海伏季休渔结束海南渔船解缆出港

20

印度女医生遭奸杀引愤慨

20

克里米亚大量民众驾车逃离,桥上堵成长龙一眼望不到头!

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

中国建设银行甘肃省分行副行长邵茂丰接受审查调查

热门游戏

  • 1
    合肥5家彩站喜中5注双色球一等奖

    射击枪战 /热度:89281

    点击下载

    “东南亚彻底老实了,巴西也表示要站好队伍”#国际局势

  • 2
    西湖边的树冒黑烟是蚊子在交配

    射击枪战 /热度:15606

    点击下载

    “80后”陈章杰履新湖南省政府副秘书长

  • 3
    营造更加安全有序的文旅市场环境让广大游客安逸游四川

    射击枪战 /热度:43683

    点击下载

    台媒和台网友力挺长荣!我们要把酒店订爆

  • 4
    崩坏3 党的根本组织原则是什么?

    射击枪战 /热度:54435

    点击下载

    苏丹中部一村庄遭袭致80人死亡

  • 5
    原神 澜沧江-湄公河合作第九次外长会在泰国举行

    射击枪战 /热度:27300

    点击下载

    涉嫌严重违纪违法,安徽省蚌埠市人大常委会原党组成员、副主任汤春义接受审查调查

  • 6
    出发吧麦芬 乌军攻击冷却塔,欧洲最大核电站燃起熊熊烈火:全欧都捏一把冷汗

    射击枪战 /热度:05975

    点击下载

    新华时评丨携手打造中国和巴西关系下一个“黄金50年”

  • 7
    永劫无间手游 俄罗斯攻打乌克兰首都#北约老米#看淡世事沧桑,内心安然无恙

    射击枪战 /热度:08956

    点击下载

    俄罗斯接连收到两个坏消息,普京将心腹派往前线

  • 8
    向僵尸开炮 #热点新闻事件#美国#大洪水#天灾面前无能为力美国犹他州一居民拍下大洪水破窗灌进房子瞬间画面@DOU+小助手

    射击枪战 /热度:85388

    点击下载

    美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

  • 9
    鸣潮 国台办:台方应严惩“2·14”恶性撞船事件责任人

    射击枪战 /热度:53827

    点击下载

    水利部启动2024年夏秋季引江济太应急调水

  • 10
    艾塔纪元 美国想打败中国真的有那么难吗

    射击枪战 /热度:19393

    点击下载

    #岸田政权虽短但黑历史真不少#【邪教、黑金、牵制中国……政权虽短,但黑历史多啊

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏声音艺术欣赏 | 游戏地图制作 | 装备道具解析 |