OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 东盟走向何方

责任编辑: 袁岑

发布时间: 2024-09-20 23:36:53

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

宁杭支队第一大队联合开展防汛应急演练

2

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

3

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

4

标题:媒体人的失范:朱小龙事件引发的思考

5

上海一公交驶入河道

6

洛杉矶12分钟

7

携手推进“空壳公司”打击治理

8

热点问答|三问“北溪”爆炸调查新进展

9

也门南部自杀式袭击死伤人数升至34人

10

苹果推最小台式Mac

11

潘展乐解散粉丝群

12

乌克兰支持者坚信,北约是和平组织!

13

2014年至2023年全国法院共审结各类环境资源一审案件190.2万件

14

市场监管总局关于注销国家标准物质定级证书的公告

15

外媒花式夸赞潘展乐

16

台媒:「海马斯」助乌克兰跨境奇袭俄罗斯领土,如入无人之境!

17

澳门特区行政长官选举候选人提名期为8月29日至9月12日

18

苏丹中部一村庄遭袭致80人死亡

19

塑造农业绿色发展新优势

20

英国前首相呼吁西方允许乌克兰使用西方武器打击俄罗斯目标

21

特朗普火力全开!发布会半程怒怼哈里斯,直言:骂的就是你

22

张雨霏晒1银5铜告别

23

女孩被警员带回警局,告诉警员可以摸她

24

赖岳谦:中国崛起让美国很不爽,挑起中和日韩菲矛盾来拖住中国!

25

“县城热”折射城镇化新趋势

26

庆阳路面塌陷出深坑

27

汝城县濠头乡:演练提升防汛力行动强化抗洪能

28

市场监管总局:今明两年制修订294项标准支撑设备更新和消费品以旧换新

29

奥运奖牌开始脱皮了

30

海地发生囚犯越狱事件致10余人死亡

31

中国管制锑出口美西方强烈反应暴露了什么?

32

艺术体操创历史夺金

33

"突发!

34

兄弟们人生的终极模型已经为你们安排好,半年北美,半年泰国。越早越好,做只候鸟#养老#退休生活#人生终极模式#加拿大#海外生活

35

浅析企业离退休职工社会化管理服务工作

36

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

37

总统大选首场辩论特朗普完胜!新总统已定?对中美关系影响重大

38

全红婵呼吁粉丝别喊

39

任嘉伦陈梦曾是队友

40

印度女医生遭奸杀引愤慨示威者:哪里才安全?

20

宁夏与多地签订“社保通”合作框架协议推进社保服务事项“跨省通办”

20

我为群众办实事|万科雁鸣湖周边公交少居民出行不便

20

扶南运河开挖,越猴急了,兔子终于出手。#国际局势#巴以冲突

20

1.家族背景硬!

20

暴富机遇从天而降!美国拼命印钞自食恶果,全球货币即将涌进中国

20

巴西坠机61人遇难

20

从荒芜到丰收:揭秘3个月培育的“摇钱草”,亩产竟达2500斤!

20

【柯文哲陷“生死劫”】岛内的政治献金风暴令柯文哲人设崩塌,陷入了政治生涯最大的一

20

现在的活不好干,准备去缅甸了,听说那里的人对我掏心掏肺。

热门攻略

1

上海再现最贵地王

2

郓城诚信医院开展无偿献血活动庆祝第七个医师节

3

在中国亮明态度之后,法国媒体对中国的态度非常不满!法媒表示,中国这是在“威胁”一

4

“加拿大允许乌克兰在俄"

5

青海省公安交管大数据建模比赛举行

6

也门南部自杀式袭击死伤人数升至34人

7

深圳原市长受贿上亿

8

齐忠彦,擅权滥权、贪敛钱财!涉嫌“三宗罪”

9

上城新建校园里“藏”着百年老宅当年小有名气的“花”牌锦缎就出自他家

10

昆山至浦东机场直升机航线试飞

11

婚姻登记取消户口簿会导致重婚、骗婚?民政部回应!

12

伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

13

万源全力推进“交通三年提级行动”

14

热点问答|三问“北溪”爆炸调查新进展

15

张之臻王欣瑜获银牌

16

谢瑜的偶像是马龙

17

河口采油厂将EAP与思想政治工作有机融合

18

热点问答|三问“北溪”爆炸调查新进展

19

日本

20

高盛称选民正在转而支持哈里斯

20

网格通讯员媒体新力量太原市第二期网格通讯员培训举办

20

镜观·领航|巩固发展新时代生态文明建设成果

20

深圳发布绿色生活创建行动绿皮书累计创建绿色单位3030家,绿色出行分担率已超78%

20

外网提问;为什么在泰国韩国人和日本人的待遇比中国游客好

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

副局长吕俊辉被开除党籍和公职

20

紧急翻天覆地!乌占领俄1097平方公里,而非俄所说的40平方公里!

20

联合国机构:苏丹超1700万学龄儿童失去教育机会

20

存款率下降钱放哪好

20

“锡”引力丨在碧水蓝天中亮出生态答卷,无锡开启生态文明新篇章

20

以军再发撤离令,要求加沙北部巴勒斯坦民众撤离

20

俄罗斯人对他国领土无止境的贪婪和欲望,是世界和平的最大威胁!

20

市场监管总局关于注销国家标准物质定级证书的公告

20

樊振东有始有终

20

非法收受巨额财物,中山一村党委原书记苏池结被开除党籍

20

美国纽约市长被怀疑涉贪检方发出传票

20

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

20

广西壮族自治区政协经济委员会副主任李延强接受审查调查

20

赵杰女子链球夺铜

20

福田粉丝探秘“城市野性居民”,共建万物和谐美丽家园

20

扛不住了,日本首相将辞职,岸田接班人呼之欲出,对华态度不简单

20

科长举报副局长背后

20

如何有效消灭竹子?揭秘老祖宗留下的两种“天敌”方法

20

国际早报|三国就加沙停火谈判发声明;特朗普哈里斯将于9月辩论

20

中日韩2023年新生人口对比,韩国22万,日本72万,中国断崖式碾压

20

前美国总统特朗普近日再次成为舆论焦点,他的一席话犹"

20

何忠友,已明确为正部长级

20

“一屏一带二网多点”!日照这样构建生态修复总体格局

热门游戏

  • 1
    调岗不久,原市委常委主动投案!

    射击枪战 /热度:95746

    点击下载

    580余家媒体集中发布这一报告

  • 2
    以色列代表联合国告别演说:我们国家最道德!引发全球热议

    射击枪战 /热度:06786

    点击下载

  • 3
    高温慰问送清凉工会将关怀送到职工心坎上

    射击枪战 /热度:12062

    点击下载

    西藏拉日铁路通车十周年记:再远的路也变近了

  • 4
    崩坏3 全国生态日共筑宁静家园

    射击枪战 /热度:23161

    点击下载

    周末不停检,健康不“打烊”五莲县人民医院周末正常接待体检

  • 5
    原神 市政府召开常务会议开展专题学法研究政务公开生态环保文旅产业高质量发展等工作张新伟主持

    射击枪战 /热度:00251

    点击下载

    南海大结局要来?中方终于等到这一天!最强“帮手”上场,乱不了

  • 6
    出发吧麦芬 2024年全球537人因猴痘死亡,世卫组织为猴痘拉响最高级别疫情警报!

    射击枪战 /热度:16135

    点击下载

    猴痘又要来了!丹麦药厂呼吁批准青少年打疫苗股价连续两日大涨17%!

  • 7
    永劫无间手游 溯水城水韵,寻峥嵘岁月

    射击枪战 /热度:06413

    点击下载

    刘文华专题调研制造业数字化转型工作并主持召开全市制造业数字化转型工作座谈会

  • 8
    向僵尸开炮 俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

    射击枪战 /热度:78031

    点击下载

    广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

  • 9
    鸣潮 贵州三穗县大桥垮塌

    射击枪战 /热度:64032

    点击下载

    以官员:以军在加沙地带的作战已“基本结束”

  • 10
    艾塔纪元 37岁佩通坦成泰国第二位女总理,他信家族或迎“生死之战”

    射击枪战 /热度:98320

    点击下载

    全红婵真牛啊真狠啊

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏音乐制作团队 | 热门游戏推荐 | 单机游戏精选 |