OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 运营成本上升,盈利压力增大,共享单车为什么频频涨价?

责任编辑: 爱玥

发布时间: 2024-09-20 10:01:09

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

2

曹缘杨昊晋级决赛

3

铸牢共同体团结谱新篇

4

俄罗斯进口商说,因汇率上涨和兑换费高涨,对华贸易陷入困境

5

法国一小型民用飞机坠海1人死亡

6

中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

7

长荣桂冠酒店回应

8

美国某种程度上宣判了多边机制的死亡,而中国正在努力重建它们

9

建行山东省分行:绿贷盘活国有存量资产促政银企多赢

10

美或无法办下届奥运

11

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

12

从荒芜到丰收:揭秘3个月培育的“摇钱草”,亩产竟达2500斤!

13

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被“双开”

14

美宇航员滞留8个月

15

2024年淄博市化妆品不良反应监测工作培训班举办

16

第八届金砖国家工业部长会议在俄罗斯下诺夫哥罗德召开

17

北京市委常委会召开会议,研究做好中轴线申遗保护后续工作等事项

18

商务部:1-7月全国吸收外资5394.7亿元人民币

19

索马里一酒店遭袭

20

身体变老的明显迹象

21

转运当你转运的时候就会看到这个视频~无论是有意还是无意~这是天意~从即刻开始~你将摆脱困境~不好的事全部解脱。

22

时政微观察丨厚植高质量发展的绿色底色

23

美国懵了宣布解除中国无人机出口限制中国宣布无人机出口管制

24

8月16日波兰总理图斯克宣布,波兰将正"

25

帅化民:总价200亿美元美对以50架F15最重大军售

26

已余震7次!未来3天台湾可能仍有5.5级地震!

27

山东舰再入西太平洋

28

外交部美大司司长杨涛会见美国青年政治家代表团

29

莫雷加德称感到自豪

30

昨天是“全国生态日”全市各地举办多彩活动带你认识“松松”与“绿友友”两个新朋友

31

顺丰撕毁硕士学位证

32

“台独”末日来了?这次不玩虚的,国台办果断出招,连拜登都没想到

33

苹果一夜蒸发1609亿

34

中方反制奏效!欧盟分歧加大,冯德莱恩提“10亿欧元豪赌计划”

35

临泉县关庙镇:“一呼即应”解困难内生动力促发展

36

情况通报!

37

现场报道|乌军在库尔斯克东翼加强攻势破坏变电站

38

日本大米库存减少致涨价限购

39

海南“村VA”|冠军争夺战即将开打!最新赛程表来了→

40

社会类:好作品奖-《农民工的露天钢琴学院》

20

【中国网评】以中国式现代化新成就为世界发展提供新机遇

20

水利部启动2024年夏秋季引江济太应急调水

20

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德国经济损失

20

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

20

警惕!有人假冒民政部老龄工作司工作人员身份进行诈骗

20

南通通州兴东街道:播撒法治的“种子”收获和谐的“果实”

20

多米尼加总统阿比纳德尔宣誓就职

20

云南丽江3.0级地震

20

以色列公开称伊朗与黎巴嫩真主党在密谋暗杀以色列高级官员。因为俄罗斯方向的战斗不理

热门攻略

1

全面推进知识产权强省建设湖北省知识产权局局长研修班在宜昌开班

2

养殖绿翅金鸠?这些常见误区你必须知道!

3

台湾发生6.1级地震多地震感强烈威力相当于0.18颗原子弹

4

《广东省科技创新条例》有哪些首创性制度?

5

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

6

俄罗斯称美国试图把“北溪”天然气管道被炸的全部责任转嫁给乌克兰俄方致力于找出真正的肇事者并予以惩...

7

德国情报局前局长:波兰有可能参与“北溪”管道爆炸事件

8

广西壮族自治区百色市政协原副主席伍奕蓉被“双开”

9

英跳水名将戴利退役

10

刘家老屋惨案-中国刑事大案纪实-刑事案件要案记录

11

铁证如山!梅根使用来历不明的冻卵孕育阿奇王子,哈里一脸懵逼

12

20城按区认定住房数

13

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

14

地铁一女子骚扰大爷

15

国羽男单全部出局

16

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

17

越南服软了,苏林即将访问中国,是否标志着美国拉拢失败呢

18

九大部分、8个镇街、超48平方公里……大足石刻风景名胜区未来长这样

19

产业兴旅游旺阜南蒙洼焕新颜

20

新华时评丨携手打造中国和巴西关系下一个“黄金50年”

20

对领导的要求是德重于才

20

常德市市场监管局召开市场准入、维护市场秩序工作调研座谈会

20

阳谷努力打造一支有情怀、有知识、有活力的乡村人才队伍

20

海南到广东仅9公里,为何不造一座跨海大桥?

20

市场监管总局关于注销国家标准物质定级证书的公告

20

美国政府批准了新一轮价值超过200亿美元对以色列军售计划此时美国批准对以军售实际上就是向以色列授权使其继续袭击加沙地带,并将冲突扩散

20

黄晓武赴成都市、德阳市、长沙市考察招商

20

加沙地带确认一例脊髓灰质炎病例

20

外国小孩朝马龙表白

20

挪威东南大学的教授格"

20

百舸争流喜开渔

20

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

20

最快15个工作日就能开饭店市场监管总局推行“高效办成一件事”改革

20

钱塘江现罕见龙眼潮

20

陈艺文3米板夺冠

20

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

20

两岸专家学者齐聚潍坊交流郑玄文化

20

男子改判无罪获国家赔偿

20

印度实习医生被奸杀引发大罢工,抗议活动恐升级社会冲突

20

热点问答|三问“北溪”爆炸调查新进展

20

全红婵陈艺文逛长隆

20

广湛高铁广佛段顺利完成首梁浇筑

20

中美已经谈妥?中国增持152亿美债,拜登派人给中方传话

20

河北省唐山市一级巡视员曹全民接受审查调查

20

大学生站躲子弹,躲空屋里和警员对枪致特警出动

20

以色列外长:若伊朗发动袭击希望英法支持以回击

20

伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

20

涉嫌严重违纪违法!龙门县代建局原总工程师廖运堂主动投案

热门游戏

  • 1
    根本不用中国出手!这次马科斯把路走窄了,杜特尔特女儿开始反击

    射击枪战 /热度:93358

    点击下载

    印度女实习医生被奸杀引发全国抗议,至少30万医护人员走上街头!莫迪发声

  • 2
    成功破局!皎漂港对我国有多重要?马六甲海峡不再是唯一

    射击枪战 /热度:74659

    点击下载

    巴基斯坦卫生部门表示,猴痘病毒在巴基斯坦被证实

  • 3
    中企承建巴基斯坦莫赫曼德水电站实现截流

    射击枪战 /热度:04384

    点击下载

    蕉下回应裁员

  • 4
    崩坏3 联合国机构:苏丹超1700万学龄儿童失去教育机会

    射击枪战 /热度:14368

    点击下载

    市委召开2024年度第四次党外代表人士双月座谈会2024-08-1706:48:02 [今日聚焦] 太原日报 阎轶洁2024-08-1706:48

  • 5
    原神 一个人,怎么看待自己的格局?

    射击枪战 /热度:07198

    点击下载

    石榴图汇·每日一图丨水厂满负荷运行让企业用水管“饱”

  • 6
    出发吧麦芬 王毅:为缅甸实现稳定、和解和发展发挥建设性作用

    射击枪战 /热度:90228

    点击下载

    曹缘杨昊晋级决赛

  • 7
    永劫无间手游 巴基斯坦发现猴痘病例

    射击枪战 /热度:68419

    点击下载

    光伏板下牧牛羊

  • 8
    向僵尸开炮 老友记钱德勒演员死因揭露:助理医生合伙贩毒,就为榨干其钱包?

    射击枪战 /热度:61550

    点击下载

    过分节俭致腹腔感染

  • 9
    鸣潮 潘展乐回应打破垄断

    射击枪战 /热度:41039

    点击下载

    上大说唱暗讽农民工

  • 10
    艾塔纪元 泰国:国会下议院今日投票选出新一任总理

    射击枪战 /热度:40215

    点击下载

    闭幕式金色美猴王

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏同人创作 | 玩家游戏创意征集 | 游戏音效库 |