OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 循化县成立70周年庆祝活动成功举办

责任编辑: 习韶

发布时间: 2024-09-20 03:46:34

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

酝酿30年,中国砸160亿,一条绕过俄罗斯的大铁路,开工进入倒计时

2

海地男子因买到假机票怒砸智利机场

3

美国突然反应过来,轰-20的最终答案,和西方想的完全不一样?

4

伊朗为何不打以色列?美国染指中东?原来美国和伊朗早就说好了

5

联合国安理会延长联黎部队任期至2025年8月31日

6

全红婵真牛啊真狠啊

7

提前33天成德线首座车站主体结构封顶

8

县城卖鸵鸟年入百万

9

台湾“邦交国”清零倒计时?又一国家喊话大陆合作,但有一个条件

10

嫌犯认出法官是同学

11

永州市市场监督管理局调研中国农科院祁阳红壤实验站知识产权产业化工作

12

美国总统气候特使拟于9月初访华,外交部回应

13

为什么唐姓在湖南省的人数那么多?

14

库尔斯克核电站守护战,库尔恰托夫封锁背后的决心与勇气

15

隆昌市融媒体中心召开优化营商环境工作会

16

原南昌城市建设投资发展有限公司党委委员、副总经理涂小毛严重违纪违法被开除党籍

17

29岁离世后生母出现索要遗产,韩女星具荷拉“催生”了一部法律。

18

越共总书记将访华

19

风雨中见证担当

20

烈士邱建军的女儿大学报到,他生前的战友们,来护送孩子

21

"乌克兰全境被轰炸,十个没想到

22

餐厅吊顶坠落致1死

23

张柱已任乌鲁木齐市委书记

24

25

世界上最危险的高速公路,飞机在头顶上降落,你敢走吗?

26

河北省司法厅征集省政府2025年立法项目建议

27

美国国家安全顾问沙利文应邀访华,为期三天,双方目的何在?

28

路上晒背遭汽车辗轧

29

美国二哥,总统备胎,美国副总统到底是怎样一个职位?

30

新华社消息|国务院新闻办公室发布《中国的能源转型》白皮书

31

为什么坐飞机耳朵疼

32

海口最新人事!吕小蕾任海口市人民政府副市长

33

辟谣女童被人贩拐走

34

最近,印度国防研究与发展组织"

35

欧电动汽车销售遇冷

36

餐厅吊顶坠落致1死

37

F勒布伦谈球拍事件

38

50万大军压境,北约下场?普京派人来北京,请中方帮3件事

39

三对双胞胎考入交大

40

沙利文主动提出,跟74岁的中国上将见面,台政客:没有永远的敌人

20

印度神剧

20

天朗气清总书记这样指引网络空间建设

20

农业农村部:把高标准农田建设成利民、富民、得民心的工程

20

日本投降79周年

20

2024黄河三角洲(东营)第16届油品贸易洽谈会暨河口区“双招双引”推介会胜利开幕

20

乌试射国产弹道导弹

20

沙利文称美方不支持“台湾独立”,能说到做到吗?

20

1990年日本贫民窟暴乱,近千人混战,场面极其惨烈!

20

长辛店大街条石路面开始迁移保护

热门攻略

1

俄罗斯国门失守,普京彻底被激怒下达指示,中方火速发声表态!

2

应晓薇卷入京华城案喊“身正不怕影子斜”,国民党盼检调公正办案

3

曹邦兴调研巫山县数字重庆建设和基层治理等工作

4

市场监管总局召开个体工商户座谈会

5

福建省出台加快“新农人”队伍建设指导意见

6

招行原副行长被查

7

美国总统气候特使拟于9月初访华,外交部回应

8

苏州市人大常委会通过一批人事任免

9

王毅同美国总统国家安全事务助理沙利文举行战略沟通

10

张志杰追悼会将举办

11

美国多州报告李斯特菌感染病例,已有8人死亡

12

变成现在这副丑肥圆的模样

13

为什么谷爱凌说“我在中国就是中国人,我在美国就是美国人”?

14

中国电商人,「入侵」俄罗斯

15

沙利文称美方不支持“台湾独立”,能说到做到吗?

16

韩称朝士兵越分界线

17

12kg黄金在海外被抢

18

日本男子10余年潜水650多次,寻找被海啸卷走的妻子遗体

19

#国航南航接收首架c919#侧面

20

中柬运河刚开挖就传来噩耗?中方愤怒,汪文斌亲自发声表达立场!

20

张家辉和张学友关系

20

终于不再惯着!中国拿美国“开刀”,杀鸡儆猴,给各国立下规矩

20

给脸不要脸?从中国离开后,加拿大突然下令对华出手,中方必将反击!

20

沙利文访华随行人员几乎都会说中文,新增三名负责中国事务人员都是谁

20

"一张照片曝光美军秘密,看来又要搞事了!

20

中巴合作树大招风,巴基斯坦频遭恐袭,巴总理率先对中方做出承诺

20

王毅同美国总统国家安全事务助理沙利文举行战略沟通

20

整治形式主义!让基层减负!

20

地太滑了,对不起

20

近日,2名美国议员要求美国国防"

20

广西冠联建设工程有限公司中标金城江区侧岭稻米产业示范区侧岭社区、塘甫村产业道路硬化项目,中标金额916733.51元

20

王毅会见沙利文

20

8月26日最新国际资讯#全球看点#国际新闻#国际局势分析#新闻

20

俄军连炸48小时,15名西方教官被抬走,2架F16疑被摧毁,美国失声

20

沙利文抵达北京,现场没铺红地毯也没有鲜花,接机人身份不简单

20

拉美多国抗议美国干涉内政,中方回应

20

世界粮食计划署车辆在加沙被直接射击以方暂无回应

20

千帆过尽我任是我

20

特朗普威胁退出辩论

20

台媒:民众党主席柯文哲鞠躬道歉,宣布要请假3个月并自动申请调查

20

美国绝对没料到!普京重大让步,帮中国建5道防线,拿下18万亿大单

20

"泽连斯基强烈不满!

20

乘高铁被行李箱砸头

20

优步将欧洲地区司机数据传至美国比利时民众:不合理

20

“慕课西部行计划”受益学生达5.9亿人次

20

外交部:欢迎更多外国人士到西藏走一走看一看

20

柬埔寨西港成立磅逊港市!

20

中美两国商务部拟于9月7日在天津举行工作会议

热门游戏

  • 1
    热闻|明星运动员自拍时坠崖!6天后被宣布死亡,年仅23岁,旅游拍照时千万留意脚下!

    射击枪战 /热度:66443

    点击下载

    美国国家安全顾问沙利文应邀访华,为期三天,双方目的何在?

  • 2
    国羽三人申请退役

    射击枪战 /热度:57916

    点击下载

    天朗气清总书记这样指引网络空间建设

  • 3
    俄罗斯国门失守,普京彻底被激怒下达指示,中方火速发声表态!

    射击枪战 /热度:91470

    点击下载

    【“关键一招”在基层】AI看贵州|红枫湖畔大冲村:“沉睡农房”变“温馨民宿”

  • 4
    崩坏3 印度古吉拉特邦洪水已造成约35人死亡

    射击枪战 /热度:38132

    点击下载

    日本上半年超3万名独居者死于家中

  • 5
    原神 管制镓锗出口后,中国将下达第三道管制令,西方希望中国刀下留人

    射击枪战 /热度:32214

    点击下载

    让案件办理更高效规范

  • 6
    出发吧麦芬 山东暴雨预警升级!7月15至19日天气预报,暴雨中心即将来袭

    射击枪战 /热度:61449

    点击下载

    网友向雷军举报王腾

  • 7
    永劫无间手游 遭同事用美工刀割喉

    射击枪战 /热度:24598

    点击下载

    美国挑唆计划彻底失败!苏林访华,越南给了三大承诺,美西方急了

  • 8
    向僵尸开炮 人口老龄化加剧日本上半年超3万名独居者死于家中

    射击枪战 /热度:74115

    点击下载

    前海梦工场系列政策及项目发布每平方米1元可入驻

  • 9
    鸣潮 美国生育率下降21%

    射击枪战 /热度:54254

    点击下载

    海南7名干部被查,涉三亚市统战部原部长和教育局原局长

  • 10
    艾塔纪元 祝贺!烟台市芝罘区芝罘岛街道西海岸社区入选团中央“伙伴计划”示范项目实施社区

    射击枪战 /热度:68311

    点击下载

    何毅亭:党的二十届三中全会的里程碑意义

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏大事件 | 玩家自制游戏 | 社交游戏专区 |