OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 唐山市原副市长曹全民被查

责任编辑: 盛凡

发布时间: 2024-09-20 09:16:26

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

美国超一半的州7月失业率上升,就业市场降温不能只怪飓风来袭

2

衡山:全力加快应急广播建设民生实事工程“火热”推进

3

以色列外长:若伊朗发动袭击希望英法支持以回击

4

最反感中国人的五个国家,美国只能排最后!

5

天凉如水,吴盐胜雪,纤指破新橙,锦幄初温,馨香不断,相对坐调笙

6

中老缅泰外长举行非正式会晤

7

外交部发言人就佩通坦当选泰国新任总理答记者问

8

第二届全区公诉人与律师论辩大赛总决赛圆满落幕

9

【预告】在线培训会|学习贯彻党的二十届三中全会精神——坚持党对进一步全面深化改革的领导

10

国际油价,涨!金价,涨!什么情况?

11

规范指定居所监视居住适用工作

12

"瑞士太自不量力了!

13

突发!张志杰遗体在国外火化,姑姑透露心酸事,印尼做法令人心寒

14

何忠友,已明确正部长级

15

河南唐河检察:三个坚持做好企业发展的“贴心人”

16

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

17

汝城县濠头乡:演练提升防汛力行动强化抗洪能

18

“在保护中开发、在发展中保护”厦门历史文化名城的保护传承与融合发展研讨会举行

19

历经6个月后,“0214金门撞船事件”侦查终结。据台媒报道,金门地检署今天通报称

20

美国邀请印度加入北约被拒,看看外网怎么说?#油管五常

21

#世界新闻#国际新闻#美国#俄乌冲突

22

果然没让大陆失望!岛内突传爆炸性消息,赖清德遭“当头一棒”!

23

男子挖地窖囚禁6名女子,最终被判死刑,受害女子却说:我自愿的

24

一心堂退回1070余万

25

2023年度“中国十大环境司法案例”公布,宜昌检察一例入选!

26

近东救济工程处:以军发布新撤离令后加沙居民已“无处可去”

27

撞一下的威力就是这么大

28

中方要求菲律宾:立即停止!立即撤出!

29

大事不妙!普京情绪彻底失控?重磅消息传出,美紧急发声撇清

30

中国亮出“杀招”,美国大举收割日本,岸田遭惨烈反噬,被逼下台

31

广东云浮市副市长王巍被查!他是80后、博士、教授!可惜也腐败了

32

56岁地级市市长转任省史志办副主任,这个调任颇值得玩味

33

缺席重要会议的市委原书记,被查了

34

中方反制奏效!欧盟分歧加大,冯德莱恩提“10亿欧元豪赌计划”

35

热闻|各地文旅官号整活,伍鹏瞬间“爬”遍全国名山!本人亲自回应:笑死了

36

卡塔尔首相与伊朗代理外长通电话讨论地区局势

37

重庆两名干部被“双开”

38

柯文哲深陷“假账”风波,朱立伦急呼救场,国民党内部意见分歧

39

“伏特台风”事件:美国炮制的谎言与国际社会的觉醒

40

市级领导干部人大代表赴代表联络站接待基层代表和群众

20

45秒92不算世界纪录

20

网约车订单层层转卖

20

汪顺与马克龙握手

20

美国宣布将破产!

20

房贷返点的隐秘生意

20

苏丹中部一村庄遭袭致80人死亡

20

小林制药退红曲业务

20

何诚:在“一带一路”上,我与家乡“双向奔赴”

20

俄罗斯成立边境地区军事安全协调委员会#俄乌冲突#库尔斯克#俄罗斯#保障#后勤

热门攻略

1

河口采油厂安全生产功夫在“事前”

2

分享说故事,点评讲道理,台湾青年分享“沉浸式

3

莫迪抵达莫斯科,开始对俄进行访问

4

意大利埃特纳火山喷发附近机场一度停航

5

已颁发数据安全,个人信息保护领域认证300张

6

德国情报局前局长:波兰有可能参与“北溪”管道爆炸事件

7

【部门动态】安宁区审计局扎实开展全省法院系统非税收入收缴管理审计调查工作

8

《大国之道》:国家文化安全是国家安全重要保障

9

贵阳:建立气象高质量发展联席会议制度

10

唐山市原副市长曹全民被查

11

热点分析,全红婵事件反映出记者的道德水平需要提高

12

毕节市最新人事任免

13

以色列定居者大规模纵火!有村民被打死

14

岸田文雄将辞首相,超7成日本民众不满,经济拉胯难怪干不下去

15

国防部:民进党当局购买武器是迎合美方的自我安慰

16

王毅外长到访缅甸,敏昂莱该醒醒神了

17

第十二届海峡青年节峰会在福州圆满举办

18

突发!“家门口”警报拉响!中国火速行动,外交部表态前所未有

19

巴拿马运河管理局再次提高运河通行能力

20

内蒙古打造稳定的生态碳汇供给基地

20

大家还记得乌克兰外长库列巴上个月7月23日至26日来华访问吗?

20

交往假军官被骗千万

20

约旦谴责以色列定居者袭击约旦河西岸村庄

20

魏建锋在全省政法系统全面从严管党治警工作推进会上强调努力锻造忠诚干净担当的政法铁军

20

杭州秋石高架将衔接硖许快速路下沙至海宁长安的市域铁路明年开工

20

贵州铜仁推动新兴行业党纪学习教育全覆盖

20

美国3天军售350亿

20

世卫最高级别警报!猴痘怎么防?快收藏这份指南

20

区统计局做好调查单位入库纳统工作

20

国家市场监管总局:规范市场竞争维护公平竞争市场秩序

20

9月1日起河南将辅助生殖医疗服务纳入医保

20

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

20

《大国之道》:国家文化安全是国家安全重要保障

20

新疆克拉玛依公布最新人事任免,涉及21人

20

哈马斯缺席新一轮加沙地带停火谈判,称“不会就新条件进行谈判”

20

尼日利亚中部至少20名大学生遭绑架

20

游客长城拍照砖松动慌张肉眼可见

20

深圳原市长受贿上亿

20

#国际局势分析#热点新闻事件法国号召驻扎在以色列国内国人回国

20

8月16日中午12时2024年南海伏季休渔期正式结束开渔令下

20

越南新上任的总书记苏"

20

外媒:博雷利将提议制裁“煽动”定居者暴力行为的以色列官员

20

访华前夕,新西兰总理翻脸,直言倒向美西方,曾要求中方提供援助

20

河北唐山周末打“虎”,两名厅官落马,今年28人被移送检察机关,有质疑声传来:洪洞

20

“高效办成一件事”改革成效如何?市场监管总局回应

20

李东宪:岛内升起的一抹“中国红”,高举五星红旗的勇敢行动者

20

县委书记耿振华赴北城街道宣讲党的二十届三中全会精神

20

三伏酷热难耐,仙人球也难挡高温侵袭,其他花卉更需小心呵护

热门游戏

  • 1
    王楚钦再谈主拍断裂

    射击枪战 /热度:53720

    点击下载

    起床号8月17日

  • 2
    网格通讯员媒体新力量太原市第二期网格通讯员培训举办

    射击枪战 /热度:72110

    点击下载

    德国选择党要求乌克兰赔偿北溪被炸损失

  • 3
    美国某种程度上宣判了多边机制的死亡,而中国正在努力重建它们

    射击枪战 /热度:98255

    点击下载

    贵州铜仁推动新兴行业党纪学习教育全覆盖

  • 4
    崩坏3 民政部集中回应离婚冷静期、结婚无需户口簿等热点

    射击枪战 /热度:54770

    点击下载

    "柬埔寨“运河开挖,中式装备到我家”

  • 5
    原神

    射击枪战 /热度:50655

    点击下载

    38岁的她,当选总理

  • 6
    出发吧麦芬 捍卫自身合法权益,中国芯片公司对五角大楼提起诉讼

    射击枪战 /热度:78230

    点击下载

    市级领导干部人大代表赴代表联络站接待基层代表和群众

  • 7
    永劫无间手游 重庆两名干部被“双开”

    射击枪战 /热度:96181

    点击下载

    非洲联盟驻华代表到访南宁畅谈合作前景

  • 8
    向僵尸开炮 三伏酷热难耐,仙人球也难挡高温侵袭,其他花卉更需小心呵护

    射击枪战 /热度:82406

    点击下载

    把党的领导贯穿改革各方面全过程

  • 9
    鸣潮 艺术体操创历史夺金

    射击枪战 /热度:53303

    点击下载

    刺杀为何总针对特朗普?特朗普的“三大罪”。

  • 10
    艾塔纪元 "俄罗斯人在克林基附近变得更加活跃,乌克兰人撤退到新的阵地

    射击枪战 /热度:06699

    点击下载

    2014年至2023年全国法院共审结各类环境资源一审案件190.2万件

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏设计大赛 | 游戏外挂打击 | 独家爆料 |