OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 以色列定居者大规模纵火!有村民被打死

责任编辑: 凤霭

发布时间: 2024-09-20 04:46:32

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

交往假军官被骗千万

2

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

3

美媒称朝鲜或将开放旅游市场

4

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

5

广东观音山国家森林公园:让绿色生态文明的底色更浓

6

不见棺材不落泪?赖清德紧急赴美国求救,我防长为两岸统一定调

7

印度人就纳闷了,总造价1000亿美元的高铁项目,我国居然不咬钩

8

注册资本200亿元!湖北水利发展集团揭牌成立

9

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

10

精神病院走出的强者287

11

制度护航生态:美丽中国建设加快推进

12

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

13

牢记总书记的嘱托|最深情的嘱托最清澈的爱

14

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

15

AI马斯克,1分钟骗走几十万

16

镇江市人大常委会出台《意见》,肯定并支持“人民法庭人大代表联络室”工作建设

17

18

美国总统大选辩论将于9月10日在费城举行

19

大家还记得乌克兰外长库列巴上个月7月23日至26日来华访问吗?

20

突发!瑞典首都确诊非洲以外首例猴痘变种病例

21

快看!万亿沙特资本“加码”布局中国,背后有这些关键因素

22

孙颖莎撤回一个陈梦

23

国防部:中国与东帝汶两军深化交流合作

24

大陆用了6个月,让赖清德明白一条硬道理,台湾回归要快很多!

25

以军一天内两次对加沙民众发布撤离令

26

据报道8月16日,韩国政坛迎来重大新闻:"

27

李冠杰:英国新政府是时候改善对华关系了

28

英法以外长耶路撒冷举行会谈

29

多措并举市场监管支撑高质量发展

30

英国各大城市骚乱升级,唐宁街紧急应对方案曝光

31

中医建议三伏吃火锅

32

全红婵给爷爷三连问

33

乌龟盲盒为何上头

34

江南华南分散性强降雨天气持续,北方又将有降雨过程

35

全球市场需求收缩,葡萄酒行业迎来“关键时刻”

36

孙颖莎4:0日本

37

第六届中华民族抗日战争史与抗战精神传承研讨会在云南举办

38

熊寿宏:扎实做好经开区棚改历史遗留问题整改工作

39

马栋龑违规吃喝,被降级

40

冯毅梅任重庆市供销合作总社理事会主任候选人

20

“浙”一周||热门研报精选20240816第131期

20

欧紫霞是军嫂

20

清北学霸刘光耀离婚

20

他信小女儿佩通坦·钦那瓦当选泰国新总理

20

射阳县洋马镇政协联络委开展“送清凉”走访慰问活动

20

李依晓官宣恋情

20

三大消息:日舰进中国领海!特朗普或抛弃北约?乌军欲袭击莫斯科

20

谷爱凌和游泳队合照

20

多平台下架长荣桂冠

热门攻略

1

最大限度利企便民江苏发文进一步推动“高效办成一件事”

2

外国网友看印度女网红在中国探索美食,并与印度食物做对比的反应

3

邹敬园为体操队发声

4

国防部:美国企图以核维霸、恐吓世界

5

中华民族之福

6

遏制体育界饭圈乱象

7

震惊!菲律宾惊天劫案:中国商店遭抢,保安独战群匪击毙匪首!

8

台公布恶性撞船事件调查结论,国台办回应

9

违规设立“小金库”,牡丹江市原副市长齐忠彦被“双开”

10

无棣县检验检测中心(计量所)完成24块电能表抽检任务

11

帅化民:总价200亿美元美对以50架F15最重大军售

12

美国《大西洋月刊》:美国婚恋市场向“钱”看,“找个金融男嫁了吧”

13

不同国家的霸气车队,印度在车上叠罗汉?英国铁骑霸气飒爽

14

美国强行嫁祸乌克兰,乌克兰拒绝接受,却愚蠢地要甩锅给俄罗斯

15

小林制药退红曲业务

16

微视频|绿水青山间

17

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

18

巴西女乒有独臂选手

19

被“驯服”的俄罗斯新寡头:作为普京的伙伴,普京如何照顾他们?

20

【沙特王储担心自己会被暗杀】最近有美国媒体爆料,说沙特王储曾在一次与美国议员的交

20

加沙停火谈判持续 各方就谈判进展表态不一

20

区政府主要领导督导检查工业企业运行和重点项目建设工作

20

"惊爆全球!

20

台湾气象部门:花莲今日地震为“4·3花莲强震”余震

20

秋风遗体正送往老家

20

巴赫再回兴奋剂问题

20

【每日一学】党的二十届三中全会精神学习自测(第一期)

20

一个北大的女学生对日本记者的回答

20

男子挖地窖囚禁6名女子,最终被判死刑,受害女子却说:我自愿的

20

"突发消息!

20

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

20

扎克伯格为妻立雕像

20

还要考虑吗?只要拿地图看一下就知道有且只有缅甸。"

20

正在新疆访问的柬埔寨国王西哈莫尼在新疆出席官方会见活动。

20

全红婵全家住进果园

20

打造“敏捷服务”,江苏部署实施29项“高效办成一件事”

20

最新!特朗普、哈里斯承诺出席总统大选辩论!拜登此前曾警告:特朗普若败选,权力未必会和平移交

20

在社会上,居然存在着一种极为荒谬的说法,说很多女干部跟领导存在不正当关系。可这纯

20

中国建设银行甘肃省分行党委委员、副行长邵茂丰被查

20

行进中国·看生态之美——青山依旧湟水悠长

20

运城水投:压实责任加快进度高效务实推进项目建设

20

每羊每日添加10克磷酸脲,可提高平均日增重26.7%!还有更多优点

20

台媒:台湾民众党“一人政党”的定位,应该趁机彻底改变了

20

芜湖市繁昌区:电力服务上门解决企业并网难题

20

中方要求菲律宾:立即停止!立即撤出!

20

皆或连通!北方将迎明显强降雨!南方未来也不弱!下周后期均趋少

20

中央纪委网站:今日截至20时,5人被查,3人被处分

20

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

热门游戏

  • 1
    赣州交控集团联兴公司开展安全生产教育培训会

    射击枪战 /热度:42596

    点击下载

    马龙每届送走一队友

  • 2
    目前我国终身不婚人群仍是少数

    射击枪战 /热度:71377

    点击下载

    西雅图风暴vs亚特兰大美梦第1节英文原声回放

  • 3
    男子被逮捕十分嚣张!嘴里叼着烟不给警察面子,蹲几天就老实了!

    射击枪战 /热度:60263

    点击下载

    伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

  • 4
    崩坏3 美防长突然撕毁协议

    射击枪战 /热度:18743

    点击下载

    真是大快人心!五月份开始,国家将严厉打击这一类人,收敛一下吧

  • 5
    原神 广西壮族自治区百色市政协原副主席伍奕蓉被“双开”

    射击枪战 /热度:65181

    点击下载

    不敢相信!狗狗偷走邻居家包裹,监控画面曝光

  • 6
    出发吧麦芬 中共福建省委常委会决定省委十一届六次全会8月23日召开

    射击枪战 /热度:07834

    点击下载

    俄罗斯称美国试图把“北溪”天然气管道被炸的全部责任转嫁给乌克兰俄方致力于找出真正的肇事者并予以惩罚

  • 7
    永劫无间手游 何诚:在“一带一路”上,我与家乡“双向奔赴”

    射击枪战 /热度:55784

    点击下载

    突发!美国欲迫使泽连斯基离职,换新傀儡上任,俄乌命运谁主宰?

  • 8
    向僵尸开炮 广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

    射击枪战 /热度:02343

    点击下载

    美国大选关键时刻,英媒曝光拜登政绩,“明星工程”无限期停摆

  • 9
    鸣潮 马来西亚发布莎阿南市空难调查报告机组人员操作失误致飞机坠毁

    射击枪战 /热度:32655

    点击下载

    如临大敌:俄圣彼得堡加强对空和对芬兰湾的防御

  • 10
    艾塔纪元 建设“南方牙谷”,南海信心满满

    射击枪战 /热度:00745

    点击下载

    英伟达回应AI芯片少

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏概念艺术 | 游戏音效设计 | 游戏内活动回顾 |