OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 俄罗斯打了3年,卢卡申科陪不起了,请中国搭把手,还白俄安宁

责任编辑: 竺烨

发布时间: 2024-09-20 23:39:53

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

意大利埃特纳火山喷发卡塔尼亚机场一度停航

2

中老缅泰外长举行非正式会晤

3

2024年7月份,日本计划援助乌克兰20台排雷机首批4台已运抵库尔斯克边境地区。

4

中老缅泰外长举行非正式会晤

5

岚山农商银行:守护夕阳红,筑牢老年人防范非法集资“防火墙”

6

最高法院医疗纠纷典型案例:纠正重庆高院不赔死亡金等错误

7

早啊!新闻来了〔2024.08.17〕

8

任嘉伦陈梦曾是队友

9

卡塔尔首相与伊朗代理外长通电话讨论地区局势

10

普京誓言将乌军从俄罗斯领土上驱逐出去,问题是怎么驱逐?

11

年轻干部要给自己压担子,强化责任担当

12

无棣县润禹水务集团工会开展送清凉活动

13

一旦收台打响,赖清德谎言将彻底暴露,大陆一个动作释放强烈信号

14

亿人见证樊振东夺冠

15

6千买金手镯仅6克重

16

中老缅泰外长举行非正式会晤

17

世界卫生组织称苏丹霍乱疫情已致316人死亡

18

陈梦要赢给所有人看

19

小孩骑行被碾压身亡

20

印度精英号称全球ceo,在美国为何遭遇集体下岗危机

21

中企承建巴基斯坦莫赫曼德水电站实现截流

22

我国“山水工程”持续稳步推进

23

广饶农商银行组织开展信贷业务知识培训

24

蚌埠市人大常委会原副主任汤春义被查

25

“行进中国”调研行|一步跨两国去边境打卡神圣又繁忙的“中国门”

26

水利部启动2024年夏秋季引江济太应急调水

27

中国发布万字长文直指美国五宗罪,美国黑手原形毕露

28

台湾新党主席吴成典:我们都是中国人,携手共创中华民族伟大复兴

29

独家专访:委内瑞拉外交部长解答,委内瑞拉加入金砖峰会是否为了去美元化

30

我为群众办实事|万科雁鸣湖周边公交少居民出行不便

31

黑龙江省牡丹江市政府原副市长齐忠彦被“双开”

32

垃圾桶内发现男婴

33

广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

34

定安通报:2名干部被处分

35

湖南泸溪:多彩非遗展演璀璨沅水之夏(图)

36

邓亚萍儿子全国冠军

37

以高质效公益诉讼检察履职护航铁路运行安全

38

台湾青年走进阳江共放纸鸢话发展

39

喻兴铸带队督导调研我县水网建设三年攻坚及国债项目建设推进情况

40

开渔了!临高千帆竞发出港捕鱼

20

美国纽约市长被怀疑涉贪检方发出传票

20

社会类:入围奖-《巴尔斯》

20

拒绝悬挂中国国旗,惹众怒后,长荣桂冠酒店道歉!网友:没诚意!

20

失踪女童在深山找到

20

赖清德出手,柯文哲被搞,民众党要散?最新民调:支持率仅剩6.2%

20

市场监管总局:开餐馆办理承诺时限压减到15个工作日

20

对财务造假零容忍!最高检印发解答,中介组织等故意提供虚假证明文件将被追究刑责

20

也门南部发生汽车炸弹爆炸事件,已造成19人死亡

20

他已任湖南省政府副秘书长

热门攻略

1

警方回应小孩遭碾压

2

财联社8月16日电,美国国务卿布林肯将于周日抵达以色列

3

产城人融合政社企共建钱塘区推进产业社区“邻里模式”

4

老年甜宠剧围猎父母

5

曹全民被查,曾任唐山市副市长

6

天气预报#一起关注天气变化

7

"乌克兰这一场玩大了?乌

8

“俄罗斯占领者在赫尔"

9

要挟患儿母亲陪睡

10

赣州2家养生馆被查

11

法国一小型民用飞机坠海1人死亡

12

新疆8月下暴雪

13

乌克兰是怎样攻入俄罗斯本土的?对之后的局势又会产生怎样的影响

14

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

15

岸田文雄称放弃选举将辞任首相!压力太大,傀儡不好当!

16

台媒:遭制裁2年受影响俄罗斯银行疯抢人民币

17

中华医学会2024年组织建设工作会议在济南开幕

18

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

19

台检方兵分七路查柯文哲蓝营叹双标:对郑文灿就点到为止

20

泰国富人家庭的千金大小姐,除了旅游就是护肤美甲,一天多潇洒?

20

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被开除党籍和公职

20

波兰总理刚刚正式宣布了!

20

重磅!日本投降79周年,一男子发视频称代表中国人向日本道歉

20

央企消费帮扶聚力行动暨中石化易捷第七届易享节启动仪式在贵阳举行

20

猴痘疫情蔓延,海关总署加强防范

20

党的根本组织原则是什么?

20

点“绿”成“金”|吃干“榨”净绿色青菜头垒起百亿大产业

20

世卫组织最高警报,猴痘疫情可能失控!会影响中国吗?

20

小孩斗气躺地遭碾压

20

我国将进一步规范农村客货邮运营服务

20

澳门公布行政长官选举日程表

20

西班牙巴利阿里群岛遭风暴袭击

20

美国总统大选辩论将于9月10日在费城举行

20

国台办:台公布的恶性撞船事件“调查结论”罔顾事实,我们不能接受

20

泽连斯基顾问爆猛料:西方早就知道

20

台青盛赞长沙:活力之城、创造之城、幸福之城

20

菏泽市召开机动车检验机构专项整治工作调度会议

20

主动交代问题的江西省市场监管局局长谢来发被查上月底曾主持会议

20

2024江苏启东(上海)人才精准对接会顺利举办

20

拒绝参加巴黎奥运会,闭幕式的五个国家

20

越南火车堪比中国高铁?看看越南火车内部设施,差距一目了然

20

李冠杰:英国新政府是时候改善对华关系了

20

伊朗不敢打以色列,却可以打本国不戴头巾的女人!又出惨案!

20

20

宝藏小城刷新文旅市场新版图

20

中美篮球赛爆发冲突

20

"突发!

20

沙特王储惊天警告!推动和平恐遭暗杀,中东局势再添变数

热门游戏

  • 1
    也门南部自杀式袭击死伤人数升至34人

    射击枪战 /热度:09561

    点击下载

    潘展乐从7追到第2

  • 2
    提升排污能力丰台河西两万余居民和120余家商户告别排污难

    射击枪战 /热度:61297

    点击下载

    民政部集中回应离婚冷静期、结婚无需户口簿等热点

  • 3
    财联社8月17日电,美国疾控中心(CDC)发布卫生警告:建议美洲游客留意“发热病毒”(奥罗普切病毒,Oropouchevirus)尤其是那些到过亚马孙河流域、南美、加勒比的人

    射击枪战 /热度:12429

    点击下载

    俄罗斯军队在顿涅茨克地区保持着"

  • 4
    崩坏3 广西一景区设施故障

    射击枪战 /热度:29664

    点击下载

    中国国家市场监管总局:涉企乱收费必须零容忍

  • 5
    原神 改革开放是提振我国文化自信的内在因子丨理响广东

    射击枪战 /热度:91188

    点击下载

    AI马斯克,1分钟骗走几十万

  • 6
    出发吧麦芬 不同国家的霸气车队,印度在车上叠罗汉?英国铁骑霸气飒爽

    射击枪战 /热度:25811

    点击下载

    胡塞:不打中国船,多国商船红海打着中国旗号,中国成红海附身符

  • 7
    永劫无间手游 伊朗和黎巴嫩真主党对以色列的报复行动可能以暗杀以色列高级官员的形式出现,而不是发

    射击枪战 /热度:29445

    点击下载

    这就是传说中的“战斗民族铁头娃”,乌军自杀无人机突然逼近,俄罗斯大兵果断用头盔撞击,从浓烟中完好走出

  • 8
    向僵尸开炮 只到看到巴勒斯坦各派代表集体签署了和解协议北京宣言,我才明白

    射击枪战 /热度:63914

    点击下载

    “一门四总理”的他信家族卷土重来,37岁佩通坦如何迎接严峻挑战?

  • 9
    鸣潮 微视频|绿水青山间

    射击枪战 /热度:69301

    点击下载

    #热点新闻事件#美国#大洪水#天灾面前无能为力美国犹他州一居民拍下大洪水破窗灌进房子瞬间画面@DOU+小助手

  • 10
    艾塔纪元 华人女子遭黑人歧视,当街被一拳爆头,在国内时的豪横呢?

    射击枪战 /热度:14268

    点击下载

    国务院副总理南下,赴东南大省

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏评测 | 游戏开发者访谈 | 游戏世界观探索 |