OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 64万吨锑化镓出口管制,美日韩半导体业巨震

责任编辑: 糜琮

发布时间: 2024-09-20 08:52:58

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

阿比纳德尔宣誓就任多米尼加总统

2

国防部:民进党当局购买武器是迎合美方的自我安慰

3

市场监管总局:连续开展民生领域反垄断执法专项行动强化民生领域监管执法

4

铜仁中院召开2024年8月审判质效工作调度会

5

上海这户人家的晾衣方法太机智了!快来看看他们是如何做到的

6

【重点关注】全面准确理解《决定》的思想指引

7

突发!巴黎奥运首例奖牌被回收事件诞生,美国紧急申诉,结果待定

8

难以置信!一男子代表国人向日本鞠躬道歉,画面曝光,网友怒了!

9

支持率只剩下6%!柯文哲推翻两党政治的挑战已结束!

10

扯犊子专业户的国际局势犀利观点大讨论

11

又贵又慢!荷兰互联网费用居欧洲高位,质量却只排第六

12

潍宿高铁为何便选宿迁?揭秘京泸二线背后的战略深意

13

哈里斯努力白费?一觉醒来,特朗普“强援”曝光,舆论彻底炸锅

14

海南:结束南海伏季休渔1.36万艘渔船出海

15

视频|英国奥运赛艇冠军回医院上班同事热烈欢迎

16

无锡惠山:党建“一链通”赋能产业发展“路路通”

17

江西省市场监督管理局局长谢来发接受审查调查

18

王楚钦复仇机会来了

19

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

20

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

21

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

22

舟山东北亚铁矿石国际分拨中心建设初具规模

23

《大国之道》:国家文化安全是国家安全重要保障

24

澳门公布行政长官选举日程表

25

#长荣桂冠酒店道歉#长荣桂冠酒店道歉,这是一个谣言,这是某些大陆媒体为了掩护台湾

26

职业杀手?短短70秒,他连杀两人,动机简直离谱!

27

潘展乐这段先别播

28

到嘴的鸭子飞了?富士康前脚回国,后脚印度马上对苹果反垄断调查

29

美国加州现罕见深海鱼尸体专家猜测或与地震有关

30

江西省市场监督管理局党组书记、局长谢来发接受审查调查

31

以色列外长:若伊朗发动袭击希望英法支持以回击

32

#库尔斯克战斗已超10天#普京与俄联邦安全会议成员召开会议

33

宁江法院召开2024年上半年工作总结暨下半年工作部署会

34

杨昊10米台预赛失误

35

猴痘又要来了!丹麦药厂呼吁批准青少年打疫苗股价连续两日大涨17%!

36

俄罗斯要把菲律宾请进金砖,中国无法容忍,金砖里冒出第二个印度

37

上海一斤黄瓜6.3元

38

以进一步全面深化改革开辟中国式现代化广阔前景

39

一分钟,看今天8月17日最新要闻速报!10条新消息快看吧!

40

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

瑞典国王观众席挠头

20

美方步步紧逼,中方一招釜底抽薪,列出美国5宗罪,打响反击战

20

快看!万亿沙特资本“加码”布局中国,背后有这些关键因素

20

挪威专家出来说实话了!8月16日,挪威专家格伦·迪森表示,美国作为以前的霸主,正

20

郁南都城:常态化“干部夜访”赋能“百千万工程”深入推进

20

男子6个月减重60斤

20

孙志刚敛财8.13亿

20

国防部:民进党当局购买武器是迎合美方的自我安慰

20

地铁11号线二期完成热滑今年内通车,将串联宝安、南山与罗湖

热门攻略

1

中美博弈下半场--文明的冲突

2

中国人越来越喜欢用国货令各国网友惊诧不已:中国人变得越来越爱国

3

男孩代替女孩做鉴定

4

基辅传出爆炸声

5

孙颖莎撤回一个陈梦

6

卡塔尔首相与伊朗代理外长通电话讨论地区局势

7

他信和泰国军方又撕破脸了?37岁女儿出任泰国最年轻总理

8

海滩出现“巨型珍珠”遭哄抢,渔民大呼赶紧放下:这确实不是珍珠

9

民政部集中回应离婚冷静期、结婚无需户口簿等热点

10

南通一废旧航母拆除改造时起火

11

母猪配种后为何不宜过量喂食?探究配种后期饲养的科学原则

12

多米尼加总统阿比纳德尔宣誓就职

13

“一门四总理”!37岁的她当选泰国新任总理

14

外交部美大司司长杨涛会见美国青年政治家代表团

15

库里家人和警察冲突

16

苹果开放的NFC国内用不了

17

黑龙江省牡丹江市政府原副市长齐忠彦被“双开”

18

中国建设银行甘肃省分行副行长邵茂丰被查

19

仪征市政协原党组书记、主席邵卫接受纪律审查和监察调查

20

潘展乐解散粉丝群

20

临夏市公安局召开常态化扫黑除恶斗争推进会

20

金山(GoldMountain)在其位于巴西"

20

8月17日凌晨,国际传来7个坏消息和3个好消息,局势发生很多变化

20

帅化民:总价200亿美元美对以50架F15最重大军售

20

31岁莫拉塔宣布离婚

20

韩国前总统文在寅夫妇,金融账户被扣押搜查!

20

美智库预测:中国2025年开始解决台湾问题,解放军分三步收复台湾

20

陈梦说就是要赢给所有人看

20

静思有我讲述:中国对美国公司实施制裁。

20

以色列外长:若伊朗发动袭击希望英法支持以回击

20

陈章杰任湖南省人民政府副秘书长

20

也门南部自杀式袭击死伤人数升至34人

20

汉堡进入9.9元时代

20

经济日报金观平:“梯度有序”优化产业布局

20

中国对锑等物项出口管制引关注,商务部:不针对任何特定国家和地区

20

“以需定购”,哈尔滨市这份“好房子”建设问卷调查继续邀您填

20

介文汲:石破茂比岸田文雄还要右与大陆保持关系紧张来提升军备

20

国台办:依法惩治极少数“台独”不涉及广大台湾同胞

20

一市公安局原四级高级警长,被开除党籍和公职

20

婚姻登记中取消户口簿是否会导致重婚、骗婚?民政部回应

20

落实“135行动计划”大家谈③|信息技术中心(审判监督庭)党支部

20

改革开放是提振我国文化自信的内在因子丨理响广东

20

中央气象台:湖南南部部分地区今晚至明天将有大到暴雨

20

南京通报5名干部被查

20

养猪要做哪些工作?有人总结了以下7条,都是养好猪的关键

20

一起来看今日要闻,8月17日新闻摘要

20

玉泉区召开优化营商环境工作推进会

20

携手共建美丽家园

热门游戏

  • 1
    中国人民解放军体育代表团参加第四届世界军校学员运动会

    射击枪战 /热度:65904

    点击下载

    美国总统大选辩论将于9月10日在费城举行

  • 2
    市应急局组织召开化工园区起底式检查问题整改情况调度会议

    射击枪战 /热度:85122

    点击下载

    澜沧江—湄公河合作第九次外长会在泰国举行

  • 3
    单县召开项目对接洽谈会

    射击枪战 /热度:70117

    点击下载

    卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

  • 4
    崩坏3 安徽省蚌埠市人大常委会原副主任汤春义接受审查调查

    射击枪战 /热度:72567

    点击下载

    克里米亚大量民众驾车逃离,桥上堵成长龙一眼望不到头!

  • 5
    原神 日本在布一个大局!大量移民巴西的浪潮,根本停不下来!太精明了

    射击枪战 /热度:50384

    点击下载

    义马市新区街道开展2024年上半年重点工作和重点项目现场交流活动

  • 6
    出发吧麦芬 职员请假参加奥运

    射击枪战 /热度:08063

    点击下载

    日本大米库存减少致涨价限购

  • 7
    永劫无间手游 以色列危机四伏:战火封锁与民众绝望交织,国际社会共盼中东和平

    射击枪战 /热度:00037

    点击下载

    鬼火少年飙车交警拦车被拖行

  • 8
    向僵尸开炮 国台办:台公布的恶性撞船事件“调查结论”推卸责任,不能接受

    射击枪战 /热度:53528

    点击下载

    陈章杰任湖南省政府副秘书长

  • 9
    鸣潮 判断俄乌战争形势和结局不能凭直觉主观意识,必须注重客观事实

    射击枪战 /热度:64723

    点击下载

    巴西多地举办灯光秀庆祝中巴建交50周年

  • 10
    艾塔纪元 被洗脑送骗子75万元

    射击枪战 /热度:41591

    点击下载

    中国科大新任6位党委常委

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏大事件 | 游戏评测报告 | 游戏下载中心 |