OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 河口采油厂将EAP与思想政治工作有机融合

责任编辑: 南门彦

发布时间: 2024-09-20 23:21:35

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

兴仁街道开展“文明祭祀共树新风”移风易俗宣传活动

2

程序辩护“三剑客”——法院办理刑事案件三项规程(至今有效)

3

济南市长清区自然资源局原党组成员、副局长、三级调研员吕俊辉被开除党籍和公职

4

海内外专家学者相聚山东青岛共话化工领域学术前沿

5

元奎已于两年前离世

6

巴基斯坦报告3例新增猴痘感染病例

7

原始部落眼里的鬼魂,喜欢捉走小孩,身体一半白一半黑(21)

8

中国企业被五角大楼移出“黑名单”,回旋镖又一次打到了美国身上

9

优化市场环境提升发展质效

10

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

11

台湾民意代表陈玉珍:两岸同属一条根,我以身为福建金门人为荣

12

菏泽市召开机动车检验机构专项整治工作调度会议

13

594集:一对情侣在沙漠里徒步旅行,究竟哪个人的处境更危险呢?

14

【砥砺奋进七十载奋楫扬帆新征程】探访中共甘肃工委纪念馆

15

如何杜绝暴力事件再次发生

16

果然不一般,大陆终于开始行动了!美国说话也不好使,赖清德完了?

17

青理工“种子支教团”:12年,希望的种子种进五千山里娃的心里

18

加沙停火谈判启动,哈马斯意外缺席——和平曙光能否再现?

19

阿比纳德尔宣誓就任多米尼加总统

20

北京15区雷电预警,今起三天雨水频繁

21

浙江省委宣讲团赴各地宣讲党的二十届三中全会精神:凝聚前行共识激发奋进力量

22

省委宣讲团向全省新社会组织宣讲党的二十届三中全会精神

23

不老的“闽南红旗渠”:开山架渠百六里,水润山海五十年

24

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

25

根本不用大陆出手?赖清德先收到致命噩耗,最后“底牌”也没用了

26

菏泽鲁西新区领导干部党的二十届三中全会精神专题学习班结业

27

佩通坦当选泰国新任总理中国外交部:愿同泰方一道深化务实合作

28

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

29

海南热带雨林国家公园管理局霸王岭分局开展全国生态日宣传活动

30

关于防治“指尖上的形式主义”相关问题举报的公告

31

2024“走进政协·台湾青年说”活动福州举行

32

中美关系再迎狂风巨浪?拜登提前“退休”,白宫新主人磨刀霍霍

33

一场悲剧,十位生命,究竟发生了什么?马来西亚"

34

莫斯科利用最近囚犯交换的胜利

35

市场监管总局:2023年全国登记在册经营主体达1.84亿户

36

县域新气象|从半年压缩到7天,古蔺县全省率先探索建设项目审批8证齐发

37

【甲秀评】“数”治乡村大有可为

38

青海、江苏两地法院联合设立三江源生态环境司法修复基地

39

台湾花莲海域发生6.1级地震,台媒:全台明显晃动,台北捷运列车一度全线慢行

40

巴基斯坦标枪力压印度,爆冷夺金,印度主持人在线崩溃~

20

国务院国资委新闻中心和澎湃新闻签署战略合作协议,助力国资国企深化改革和发展

20

巴基斯坦锻造高质量卡车半轴

20

曹全民被查,曾任唐山市副市长

20

外交部大使参赞感知现代化新青海建设成就

20

樊振东回复小莫

20

江山如画|江山画中游,“豫”见万里锦绣

20

涉及16名干部!云南一地发布最新人事任免!

20

优化市场环境提升发展质效

20

民政部集中回应离婚冷静期、结婚无需户口簿等热点

热门攻略

1

英国多地爆发骚乱

2

超十国申办2036奥运

3

中老缅泰外长举行非正式会晤

4

中国最高法发布案例推动因地制宜发展新质生产力

5

三伏酷热难耐,仙人球也难挡高温侵袭,其他花卉更需小心呵护

6

第二届全区公诉人与律师论辩大赛总决赛圆满落幕

7

省委驻滨海县乡村振兴工作队召开“乡村振兴金融惠农”见面会

8

以官员:以军在加沙地带的作战已“基本结束”

9

他信之女,成为泰国最年轻总理

10

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

11

热点问答|三问“北溪”爆炸调查新进展

12

拜登法案执行不顺,超250亿锂电项目被迫暂停!

13

艺术体操队载誉回国

14

镇江市人大常委会出台《意见》,肯定并支持“人民法庭人大代表联络室”工作建设

15

最高法政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

16

马龙说不适合当教练

17

海关总署:严防猴痘疫情,守护人民安全

18

内蒙古打造稳定的生态碳汇供给基地

19

澳门特区行政长官选举候选人提名期为8月29日至9月12日

20

海南热带雨林国家公园管理局霸王岭分局开展全国生态日宣传活动

20

美国男子被父亲抱怨脚臭,暴怒开枪,不小心扣动了扳机

20

奥运五环眼镜火了

20

台风“安比”继续北上日本首都圈航班大规模取消

20

三个厅官同日被开除

20

中国最高法发布案例推动因地制宜发展新质生产力

20

国台办:我们对此不能接受

20

伊利道歉

20

大连机场给韩国人挂白牌,韩国网友破防:这是把我们当下属对待!

20

特朗普:如果你憎恨美国以色列,美国不欢迎你

20

石智勇疑内收肌断了

20

我为群众办实事|万科雁鸣湖周边公交少居民出行不便

20

信仰的美国与现实的美国存在多大差异?一位亚裔女性的困惑

20

婚姻登记条例修订草案征求意见:不再需要户口簿

20

中美博弈,美国最大的弱点是什么?一个台湾人说出了真相

20

泰国总理的权力有多大?怎么就被法院解职了?

20

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

20

今天,正式开幕!

20

凝聚改革共识做到双岗建功2024-08-1706:47:22 [今日聚焦] 太原日报 阎轶洁2024-08-1706:47

20

广东省首个行政执法监督码深圳上线为330万商事主体赋予“保护码”

20

辟谣纸板床中国制造

20

扎克伯格为妻立雕像

20

关于防治“指尖上的形式主义”相关问题举报的公告

20

日薪200画乌龟眼睛

20

唐山市原副市长曹全民被查

20

2024年临高县第二届开渔文化节开幕

20

沉默11天后,伊朗拨打中方电话交底,中国这一局赢的太漂亮了!

20

房价很低的宜居城市

20

被安排卧铺禁用枕头

热门游戏

  • 1
    市旅文部门服务涉旅企业做好奖励政策兑现

    射击枪战 /热度:80504

    点击下载

    男子被逮捕十分嚣张!嘴里叼着烟不给警察面子,蹲几天就老实了!

  • 2
    张雨霏希望暂别游泳

    射击枪战 /热度:87201

    点击下载

    黎巴嫩南部一住宅遭以军袭击致多人死亡

  • 3
    多米尼加总统阿比纳德尔宣誓就职

    射击枪战 /热度:41969

    点击下载

    数字人民币代发工资

  • 4
    崩坏3 库尔斯克一队俄兵集体投降,排成一排摔倒后立马爬起来

    射击枪战 /热度:35290

    点击下载

    记者观察加沙停火谈判持续以媒称分歧缩小哈马斯希望以“认真回应”

  • 5
    原神 今天,纪念于敏。他是“共和国勋章”获得者、“两弹一星”功勋奖章得主。于敏说:“国家需要一定全力以赴。缅怀,致敬!

    射击枪战 /热度:20163

    点击下载

    “共建‘一带一路’助力共建国家现代化发展”

  • 6
    出发吧麦芬 军进攻俄罗斯本土想“调虎离山”,却断绝了乌克兰和平的希"

    射击枪战 /热度:50031

    点击下载

    外媒花式夸赞潘展乐

  • 7
    永劫无间手游 四川成都市锦江区对口帮扶甘孜州炉霍县奶渣变身新产业

    射击枪战 /热度:41843

    点击下载

    达州渠县城乡供排水及污水处理一体化项目全力推进

  • 8
    向僵尸开炮 伊朗女孩与道德警察对峙警察以未戴头巾要逮捕女孩

    射击枪战 /热度:61703

    点击下载

    聚焦高质量发展丨“傻瓜肥”里的新质生产力

  • 9
    鸣潮 毫无底线!美国驻华大使馆否认P图,称中国媒体已撤稿,惨遭打脸

    射击枪战 /热度:37573

    点击下载

    尼日利亚中部至少20名大学生遭绑架

  • 10
    艾塔纪元 中国人越来越喜欢用国货令各国网友惊诧不已:中国人变得越来越爱国

    射击枪战 /热度:45375

    点击下载

    拒绝参加巴黎奥运会,闭幕式的五个国家

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 独家专访 | 充值中心 | 游戏原声大碟 |