OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 学习二十届三中全会心得体会范文

责任编辑: 缑骁

发布时间: 2024-09-20 17:25:04

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

蓬安县应急管理局开展迎峰度夏电力保供和安全生产工作情况调研

2

哈里斯白宫梦碎了?重大出轨丑闻曝出,关键时刻,特朗普发声炮轰

3

以钉钉子精神抓好改革决策部署落实|“静·语”午间沙龙

4

库尔斯克激战正酣,乌后院起火?白俄罗斯出兵南下,陈兵乌白边境

5

国防部:中国与东帝汶两军深化交流合作

6

市场监管总局:对涉企乱收费必须零容忍,已督促退还违规收费3.93亿元

7

云阳县委书记陈道彬到凤鸣镇、龙角镇、蔈草镇、清水土家族乡调研

8

大学生站躲子弹,躲空屋里和警员对枪致特警出动

9

暗杀总理,高举反印大旗,惹恼老仙,锡克教与印度的恩怨情仇

10

华盛顿希望以色列和巴勒斯坦和解,然被拒绝了

11

日本队田忌赛马输了

12

杨昊10米台预赛失误

13

美国极品杀人魔,只将年轻男子作为目标,还对尸体做不可言状之事

14

农发行哈市城郊支行完成全省农发行系统首次"智链贷2.0"维护环节

15

市人大常委会检查组开展大气污染防治“一法一条例两规定”执法检查

16

微视频|绿水青山间

17

美调查记者:美国可能因兴奋剂丑闻被禁止举办洛杉矶奥运会

18

猴痘疫情卷土重来

19

美国总统大选辩论将于9月10日在费城举行

20

英国彻底乱套了!多地被暴乱席卷,堪称13年以来最大规模骚乱#英国#暴乱#骚乱

21

“一门四总理”的他信家族卷土重来,37岁佩通坦如何迎接严峻挑战?

22

蔬菜价格达近10年同期最高

23

也门南部自杀式袭击造成至少14名士兵死亡

24

惊天大新闻!

25

苏丹中部一村庄遭袭致80人死亡

26

市场监管总局:涉企违规收费专项整治已督促退还3.93亿元

27

海南公安模范风采|文昌市公安局经侦大队大队长杨云:以警企联动服务机制护航经济发展

28

18岁上岸省监狱系统

29

此次乌克兰攻入俄罗斯本土,从表面上看,是到敌人后方去,再前进500公里打到莫斯科

30

【文化社区建设】德州天衢新区宋官屯街道十二里庄社区:开展“巧手编织,乐享生活”非遗麻绳编织活动

31

当非洲甘蔗遇见中国

32

新闻人物|佩通坦当选泰国总理钦那瓦家族重返权力中心

33

绿色剧变:中国如何引领能源新时代?

34

欧洲距离最近的两个首都,以及唯一一个同时与两个国家接壤首都地处奥地利和匈牙利边境的斯洛伐克首都布拉迪斯拉发,是世界上唯一一个同时与两个国家接壤的首都

35

深圳原市长受贿上亿

36

澳门特区政府学习贯彻二十届三中全会精神传达会召开

37

美国国会议员称TP-LinkWi-Fi路由器为“公然的国家安全威胁”

38

2024年全国生态日启动仪式暨研讨会在香港举行

39

中国建设银行甘肃省分行党委委员、副行长邵茂丰接受纪律审查和监察调查

40

区十三届人大常委会举行第二十六次会议

20

两岸江河融血脉海峡青年话发展

20

猴痘疫情蔓延,海关总署加强防范

20

三角洲行动,水泥车出金砖,队友惊呼:这都能出?

20

关键时刻,普京没等来增援,两个小弟反倒打起哑谜,作壁上观

20

越南重启高铁梦,向中国既要技术又要钱

20

市场监管总局:2023年全国登记在册经营主体达1.84亿户

20

日本又要换首相了!自民党内斗根源何在?岸田文雄退选透露何信号

20

广东云浮“80后”博士副市长王巍通报被查

20

李依晓官宣恋情

热门攻略

1

土耳其将起诉以色列

2

套现客户8000获刑

3

第五届滨州人才节暨黄河流域人才赋能新质生产力发展大会举行

4

美媒警告:与中国开战不仅不可接受,而且是全球性自杀

5

"强烈建议修改中秋节调休方案!

6

安徽交控集团高质量发展取得新成效新突破

7

#普京为何还没能把乌军打出俄本土#

8

年轻人爱上新中式

9

小莫谈奥运夺金可能

10

执法中队原负责人截留保安工资、收受贿赂被处分,郑州5人被通报

11

欧盟对华加征反补贴税恐将错失中国投资

12

全红婵陈芋汐晋级

13

8月16日,据《日经亚洲》援引消息人士的话报道,孟加拉国可能从印度引渡前总理哈西

14

睡觉流口水有大问题

15

县委书记耿振华赴北城街道宣讲党的二十届三中全会精神

16

上门给中方施压无果,500万人口小国恼羞成怒,放话扩大对华制裁

17

域见长丰

18

中央气象台:华北黄淮等地有中到大雨江南华南等地有分散性暴雨

19

七个摇摆州输掉五个,特朗普无视劝告,执意对哈里斯进行人身攻击

20

银龙驰骋,乡村振兴美丽新画卷徐徐铺展

20

澳IT专家批美炮制“伏特台风”:把中国描述成网络威胁是危险的

20

一张“托底网”帮得准、托得稳

20

澜沧江—湄公河合作第九次外长会在泰国举行

20

乌苏里江海青段洪峰正平稳过境

20

马林致谢何冰娇

20

他信之女当选泰国新总理,泰媒:振兴经济将是她上任后首个挑战

20

查尔斯三世的逆袭:从争议国王到英王室最赚钱的掌舵者

20

西藏政协工作交流座谈会在拉萨召开

20

“行进中国”调研行|硬科技如何“破壁”?

20

广东省云浮市政府党组成员、副市长王巍被查

20

磐石市:着力构建“无事不扰有事必应”良好营商环境

20

闭幕式爆改音乐节

20

林武在烟台调研核电产业发展时强调积极安全有序推进核电项目建设加快经济社会发展全面绿色转型

20

男子6个月减重60斤

20

黎智英案细节曝光,监狱成最终归宿,陈方安生与李柱铭何时收监?

20

上门威胁中国一无所获,500万人口小国撂狠话:应扩大对华制裁

20

中央气象台:全国大部地区大气扩散和湿清除条件较好

20

俄罗斯成立边境地区军事安全协调委员会#俄乌冲突#库尔斯克#俄罗斯#保障#后勤

20

河南新野检察:新进人员开启“入职第一课”全方位提升履职能力

20

两部门联合发布《渔业行政违法行为名称规范》

20

关于深化澜沧江-湄公河水资源合作的倡议(摘要)

20

局长谢来发,主动交代问题

20

贝东丹当选泰国总理后首发言!感谢赛塔所做的贡献!

20

李冠杰:英国新政府是时候改善对华关系了

20

西方对蒙古“套近乎”,中俄怎么看?蒙古自有打算

20

武进:医师节:领导慰问彰显关怀

20

美国或迎首位女总统,哈里斯胜率高达7成!特朗普:车轮战不公平

20

#历史上的今日#1939年8月16日 出席中共中央政

热门游戏

  • 1
    45秒92不算世界纪录

    射击枪战 /热度:72594

    点击下载

    以官员:以军在加沙地带的作战已“基本结束”

  • 2
    成都老人种出53年“昙花王”,一次开花数百朵,那叫一个壮观!

    射击枪战 /热度:96363

    点击下载

    一面锦旗背后的央企担当

  • 3
    绝味三年蒸发550亿

    射击枪战 /热度:87706

    点击下载

    珠海海事:激发“红色引擎”助力乡村振兴

  • 4
    崩坏3 山西省吕梁市召开医保巩固衔接工作安排调度会

    射击枪战 /热度:13129

    点击下载

    国家市场"

  • 5
    原神 湖南东安县:聚焦营商环境优化强化监督办实事

    射击枪战 /热度:00281

    点击下载

    秦皇岛山海关区人民法院开展全国生态日普法宣传活动

  • 6
    出发吧麦芬 成都老人种出53年“昙花王”,一次开花数百朵,那叫一个壮观!

    射击枪战 /热度:22336

    点击下载

    多米尼加总统阿比纳德尔宣誓就职

  • 7
    永劫无间手游 雷雨天能不能打电话

    射击枪战 /热度:56695

    点击下载

    国台办:对此不能接受

  • 8
    向僵尸开炮 张本美和谈对战中国

    射击枪战 /热度:30300

    点击下载

    台青盛赞长沙:活力之城、创造之城、幸福之城

  • 9
    鸣潮 岳汉:泰国总理又下台了!是军方故伎重演,还是他信借刀杀人?

    射击枪战 /热度:36931

    点击下载

    身体变老的明显迹象

  • 10
    艾塔纪元 厦门市委常委游文昌已任市委政法委书记

    射击枪战 /热度:35709

    点击下载

    刘和平:被时势造就的哈里斯能走多远?

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏跨界合作 | 游戏音效大赛 | 游戏达人秀 |