OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 俄罗斯的错误绝不能再犯!若是台海开战,中国必须咬死这3点

责任编辑: 漆雕筌

发布时间: 2024-09-21 04:00:31

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

又是一年“8·15”,日本动向令人忧

2

黑龙江省牡丹江市原副市长齐忠彦被“双开”

3

汪顺混合泳摘铜

4

巴基斯坦报告3例新增猴痘感染病例

5

青海、江苏两地法院联合设立三江源生态环境司法修复基地

6

湖南省人大常委会执法检查组调研生态环境卫片图斑与监测网络建设情况

7

多部门倾心服务助企走上“快车道”

8

中国“神奇”在欧洲超市被抢光,欧洲美女直呼:既漂亮又好用

9

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

10

国新办举行“推动高质量发展”系列主题新闻发布会(国家市场监督管理总局)

11

主动投案,云南迪庆州维西县原住房和城乡规划建设局局长赵中华接受审查调查

12

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

13

近东救济工程处:以军发布新撤离令后加沙居民已“无处可去”

14

在库尔斯克乌军很是张扬,可是在乌本土,俄各路大军攻势丝毫未减,波克罗夫斯克和托列茨克即将失守

15

桂平烟草:遏制"烟卡"蔓延守护未成年人健康成长

16

以权谋私,大搞权钱交易!韶关市曲江区委原常委、宣传部原部长张秀兰被“双开”

17

阿汤哥上演动作大片

18

浙江省委宣讲团赴各地宣讲党的二十届三中全会精神:凝聚前行共识激发奋进力量

19

北溪管道,真是乌克兰炸的?

20

外媒的越南消息,可信吗

21

6.1级地震“摇醒”台湾居民,未来3天或有5.5级地震,该地带为何多发?

22

中老缅泰外长举行非正式会晤

23

周六你需要知道的隔夜全球要闻

24

腊戌城已经连续一周多没有枪声了!同盟军对腊戌的"

25

江小白硬刚东方甄选

26

莎头拿下百万票房

27

广西壮族自治区政协经济委员会副主任李延强接受审查调查

28

“让世界看见鄂州”湖北鄂州启动中外媒体主题采访活动

29

让失能人群“老有所护”——利安长护情暖万家

30

本轮新冠年轻人易感

31

地方借钱超4万亿

32

巴赫再回兴奋剂问题

33

日本发生7.1级地震

34

开除员工称法无所谓

35

河北康保:融入京津冀协同发展力度足成果丰

36

2024年食品安全“你点鄂检”专题直播活动走进武当山

37

江西省市场监督管理局局长谢来发,主动交代问题

38

国台办回应台公布恶性撞船事件“调查结论”

39

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

40

大熊猫丫丫24岁了

20

违规设立“小金库”,牡丹江市原副市长齐忠彦被“双开”

20

再见现崔嵬|长安街何时显露今日轮廓

20

“打飞的”何时普及?上海:2026年实现航线全域连续覆盖

20

最高人民法院党组成员、政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

20

锚定现代化改革再深化|湖北丹江口:保护水源地生态环境确保“一泓清水永续北上”

20

7点出发丨爆火!“硬控”网友的“乌龟对对碰”到底是个啥?

20

检调兵分七路、约谈六人处理柯文哲案件,台湾民众党焦头烂额

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

徐州新沂市:特色产业添动力,和美乡村绽芳华

热门攻略

1

巴黎奥运会期间有中国大陆住店旅客发现台湾长荣酒店"

2

莫斯科军事装备制造厂大火-直升机前往该地区灭火#莫斯科

3

这一次"

4

中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

5

"邓公千古,世纪伟人[赞][赞][赞]

6

凌云:聚焦技能人才培育点燃乡村振兴“原动力”

7

印度女医生遭奸杀引愤慨

8

新闻天天看!2024年8月17日新闻简报!国内国际新闻励志微语

9

清远佛冈:探索“AI+检察”履职新路径,为司法工作插上智慧翅膀

10

国外街头爆发枪击案,男子作死近距离观察

11

哈马斯半数部队已重建战力,新领导人更加激进,以色列或面临反攻

12

市场监管总局:深化重点领域反垄断监管执法,2022年以来罚没金额超过25亿元

13

豪车被撞定损406万

14

法国一小型民用飞机坠海1人死亡

15

卡塔尔首相与伊朗代理外长通电话讨论地区局势

16

新形势下国有企业加强政工师队伍建设的途径

17

《南方日报》记者朱小龙,你被除名不当记者以后就是一个白痴!

18

中老缅泰外长举行非正式会晤

19

今天在福建也感受到了震感!希望中国台湾的同胞们平安!希望大家都平平安安!#台湾地

20

快讯:以色列高官可能遭暗杀

20

金牌原材料900美元

20

青浦:连续变道急刹“路怒”司机被行拘

20

他已任湖南省政府副秘书长

20

金山(GoldMountain)在其位于巴西"

20

据新加坡联合早报报道,美国加州民主党议员当地时间1"

20

扬州发布领导干部任前公示

20

昆明市不动产登记中心办公室主任宋伟烨接受纪律审查和监察调查

20

来宾市检察院举办2024年未成年人检察业务竞赛

20

省交通运输厅工程建设事务中心调研地铁5号线智慧工地一体化建设

20

维生素价格涨256%

20

大学生站躲子弹,躲空屋里和警员对枪致特警出动

20

杭州一外卖门店员工徒手抓面

20

河北崇礼开展蒿草清除行动

20

泽连斯基冒险打进俄国土,随之而来的是4条坏消息,条条都很致命

20

美国华人保姆遭残酷虐待,揭露跨国雇佣的黑暗一面

20

福建向金门供水超3500万吨

20

统一势在必得!4国联手对华打响“第一枪”,马英九紧急表明立场

20

重磅:莫斯科放弃限制,基辅告急!全球安全面临新挑战?

20

金门地检署公布“2·14”撞船事件调查结论,国台办:不接受

20

青海省总工会启动2025年职工医疗互助保障活动

20

北溪事件“真相”流出,美国甩锅乌克兰,泽连斯基果断反击

20

徐卓一戴眼镜跨栏

20

赵立坚妻子自曝患癌

20

台湾花莲海域6.1级地震后发生7次余震,专家初步判断不属于“4·3花莲强震”余震

20

日将第八轮核污排海

20

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

20

利津河务局:采砂监管不松弦

20

《揭秘大秦岭》守护中华父亲山8月15日全国生态日活动顺利举办

热门游戏

  • 1
    古特雷斯:联合国准备为加沙儿童接种脊髓灰质炎疫苗

    射击枪战 /热度:33876

    点击下载

    泰国政局“三足鼎立”佩通坦为何能够顺利当选?

  • 2
    罗森回应崩了

    射击枪战 /热度:87866

    点击下载

    最大限度利企便民江苏发文进一步推动“高效办成一件事”

  • 3
    解南社区有了职工健康驿站

    射击枪战 /热度:77898

    点击下载

    世界上降水最多的地方,全年几乎没晴天,当地人:被子都长蘑菇了

  • 4
    崩坏3 澳门特区行政长官选举候选人提名期为8月29日至9月12日

    射击枪战 /热度:22756

    点击下载

    2024西辽河文化研讨活动在通辽市举行

  • 5
    原神 岸田宣布弃选后高调向靖国捐钱石破茂高调窜台为接任做准备_

    射击枪战 /热度:00154

    点击下载

    美国环境调查组全部坠机身亡,俄亥俄州的水很深,网友称把握不住

  • 6
    出发吧麦芬 中国限制锑出口,对发“战争财”的美国不是好消息

    射击枪战 /热度:42798

    点击下载

    九大部分、8个镇街、超48平方公里……大足石刻风景名胜区未来长这样

  • 7
    永劫无间手游 民调领先后,哈里斯身份变了,对华政策基本确定,特朗普要失望了

    射击枪战 /热度:72300

    点击下载

    中方反制奏效,欧盟砸10万亿救市,冯德莱恩发现,首个反对国出现

  • 8
    向僵尸开炮 张本美和赛后哭了

    射击枪战 /热度:41804

    点击下载

    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

  • 9
    鸣潮 美国女大学生宿舍开窗睡觉,被流浪汉入室性侵

    射击枪战 /热度:71612

    点击下载

    联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

  • 10
    艾塔纪元 国家级荣誉!西峡一公司技术中心主任陈守杰获授国务院政府特殊津贴!

    射击枪战 /热度:33160

    点击下载

    自贡荣县:“12345”与纪检协作联动,强力促推热线解难事办实事

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 玩家自制游戏推荐 | 玩家对战视频 | 游戏同人创作 |