Video wird geladen...

Video konnte nicht geladen werden

Beim Laden dieses Videos ist ein Problem aufgetreten. Dies könnte an einem vorübergehenden Netzwerkproblem liegen oder das Video ist möglicherweise nicht verfügbar.

“遥遥遥……遥领先” 6月12日，华为开发者大会 HDC 2026 在东莞举行。余承东在会上谈到盘古大模型，称华为早年发布盘古时，“全中国、全世界都不知道大模型为何物”，华为可以说是行业“绝对的全球先驱者”，但后来因为各种原因“没做好”。余承东还表示，去年国庆节前夕公司让他重新负责大模型，他会带领团队“一路赶超”，并称“在我余承东的字典里只有第一，没有第二”，要从“中国第一”走向“世界第一”。有博主随后质疑这一说法，认为余承东的表述“说对也对，但确实又不完全是对的”。博主指出，盘古大模型最早发布于 2021 年，确实早于 ChatGPT 上线，但当时“大模型”概念与今天的大模型并不完全相同；同时 GPT-3 在此前已在技术行业内出名，因此不能说“全世界都不知道大模型为何物”。该博主认为，华为在盘古上确实入场较早，但余承东的说法有“装逼”“别装过头了”的成分。

李老师不是你老师

2,254,564 subscribers

1,048,237 Aufrufe • vor 2 Monaten •via X (Twitter)

Nachrichten & Politik Wissenschaft & Technologie

Anya Rossi• Live Now

Private livecam show

0 Kommentare

Keine Kommentare verfügbar

Kommentare vom Original-Post werden hier angezeigt

Ähnliche Videos

余承东：要带领盘古大模型走向世界第一华为终端BG董事长余承东今日表示，“在全世界都不知道大模型为何物的时候，华为就发布了盘古大模型，可以说是这个行业的全球先驱者。后来没做好、不应该。” “去年国庆节前夕，公司又让我来负责这个大模型，我会带领团队一路赶超，从中国第一，走向将来的世界第一。我余承东的字典里，没有第二，只有第一。”

余承东：要带领盘古大模型走向世界第一华为终端BG董事长余承东今日表示，“在全世界都不知道大模型为何物的时候，华为就发布了盘古大模型，可以说是这个行业的全球先驱者。后来没做好、不应该。” “去年国庆节前夕，公司又让我来负责这个大模型，我会带领团队一路赶超，从中国第一，走向将来的世界第一。我余承东的字典里，没有第二，只有第一。”

外汇交易员

196,242 Aufrufe • vor 2 Monaten

华为不能没有余总，太 JB 能说了(^🙏^) 余承东：全中国、全世界都不知道大模型为何物的时候，我们就发布了盘古大模型！未来我们要从中国第一，赶超世界第一！

华为不能没有余总，太 JB 能说了(^🙏^) 余承东：全中国、全世界都不知道大模型为何物的时候，我们就发布了盘古大模型！未来我们要从中国第一，赶超世界第一！

小牛

33,356 Aufrufe • vor 2 Monaten

这是18年，ARM威胁华为要断供，余承东说已经有备胎了，断不断无所谓（事实也确实如此）… 这证明至少在5年前，华为已经预见到了今天，并为此作了充分准备，这只会让华为亏很多钱，也可能完全用不上，但就是做了… 伟大的企业！

这是18年，ARM威胁华为要断供，余承东说已经有备胎了，断不断无所谓（事实也确实如此）… 这证明至少在5年前，华为已经预见到了今天，并为此作了充分准备，这只会让华为亏很多钱，也可能完全用不上，但就是做了… 伟大的企业！

汉尼拔火罐

132,911 Aufrufe • vor 2 Jahren

卧槽，这个模型真的有点东西啊! 看完后就想问什么时候可以上手啊！ Odyssey AI实验室刚刚扔出一个真正让人眼前一亮的家伙：Starchild-1。这是全球第一个实时多模态世界模型。它不只是生成画面，还能同时生成真实世界的声音。视频里你能看到一个完整的场景：画面在动，声音同步响起，视觉和听觉完全融为一体，像真正活过来的世界模拟。以前的世界模型大多只能“看”世界，现在Starchild-1直接学会了“听”。这不仅仅是又一个视频生成工具，更大的意义是朝着通用世界模型又迈出的关键一步，真正理解并模拟物理世界的下一步。 Odyssey团队说，他们正在用这种新形式的多模态智能，重新定义AI对现实的认知。

卧槽，这个模型真的有点东西啊! 看完后就想问什么时候可以上手啊！ Odyssey AI实验室刚刚扔出一个真正让人眼前一亮的家伙：Starchild-1。这是全球第一个实时多模态世界模型。它不只是生成画面，还能同时生成真实世界的声音。视频里你能看到一个完整的场景：画面在动，声音同步响起，视觉和听觉完全融为一体，像真正活过来的世界模拟。以前的世界模型大多只能“看”世界，现在Starchild-1直接学会了“听”。这不仅仅是又一个视频生成工具，更大的意义是朝着通用世界模型又迈出的关键一步，真正理解并模拟物理世界的下一步。 Odyssey团队说，他们正在用这种新形式的多模态智能，重新定义AI对现实的认知。

Berryxia.AI

37,309 Aufrufe • vor 3 Monaten

11月12日(发布) 河北。一博主称，张维为说中国不少领域已达到了清场式遥遥领先。但就拿人工智能来说，目前最强的智能芯片无疑是英伟达，自然语言处理当属openai为首，而我们的大模型产品，其实是在openai大火后才跟进的，可为什么还有人无脑支持张维为呢，我想是因为屁股决定大脑，情绪先于思维。

Sensitive content

11月12日(发布) 河北。一博主称，张维为说中国不少领域已达到了清场式遥遥领先。但就拿人工智能来说，目前最强的智能芯片无疑是英伟达，自然语言处理当属openai为首，而我们的大模型产品，其实是在openai大火后才跟进的，可为什么还有人无脑支持张维为呢，我想是因为屁股决定大脑，情绪先于思维。

李老师不是你老师

560,517 Aufrufe • vor 1 Jahr

抖音上一博主，因能同时模仿小米雷军和华为余承东的口音，吸引了不少关注。近日，他此前的模仿视频被小米和华为全部举报下架，理由是“恶意抹黑诋毁攻击企业家”

抖音上一博主，因能同时模仿小米雷军和华为余承东的口音，吸引了不少关注。近日，他此前的模仿视频被小米和华为全部举报下架，理由是“恶意抹黑诋毁攻击企业家”

李老师不是你老师

193,389 Aufrufe • vor 5 Monaten

黄仁勋提到：优秀的AI开源模型对整个行业都是好事，无论它来自哪里... 在和 axios 的最新访谈中，Jensen已经聊到了中国的开源模型和美国闭源模型的看法，今天又特意注册X发文说明为什么开源模型很重要..... 他说：“这些中国模型非常优秀，优秀的开源模型就应该被使用” “我认为优秀的AI开源模型对整个行业都是好事，显然，只要有优秀的AI，即使是开源的，无论它来自哪里，都会带来更多的使用” “优秀的模型带来大量使用，大量使用带来巨大增长。而这只是个开始” “DeepSeek当时就是这样，Kimi也会是这样” “还有一个误解是，开源模型会对闭源模型构成对抗，这也是错的”

黄仁勋提到：优秀的AI开源模型对整个行业都是好事，无论它来自哪里... 在和 axios 的最新访谈中，Jensen已经聊到了中国的开源模型和美国闭源模型的看法，今天又特意注册X发文说明为什么开源模型很重要..... 他说：“这些中国模型非常优秀，优秀的开源模型就应该被使用” “我认为优秀的AI开源模型对整个行业都是好事，显然，只要有优秀的AI，即使是开源的，无论它来自哪里，都会带来更多的使用” “优秀的模型带来大量使用，大量使用带来巨大增长。而这只是个开始” “DeepSeek当时就是这样，Kimi也会是这样” “还有一个误解是，开源模型会对闭源模型构成对抗，这也是错的”

梭哈.AI

51,188 Aufrufe • vor 1 Monat

华为是家怎样的公司？为何等级制如此严重？4月22日，鸿蒙智行新品发布会，余承东像刚打完拳击的选手，坐在椅子上休息，一名美女助理，掏出一瓶水拧开瓶盖，半蹲着递给余承东，余承东喝了一口后，助理又半蹲着接过水。余承东在华为排位第几？第一梯队：轮值董事长，目前由徐直军、孟晚舟、汪涛三位副董事长轮流出任。他们是公司最高领袖。但全球货币(全球货币 Global Money)研究，在华为17人组成的董事会中，余承东属于前5-8名的核心决策者。而作为创始人，任正非直接持股约0.7%，但他拥有“否决权”。

华为是家怎样的公司？为何等级制如此严重？4月22日，鸿蒙智行新品发布会，余承东像刚打完拳击的选手，坐在椅子上休息，一名美女助理，掏出一瓶水拧开瓶盖，半蹲着递给余承东，余承东喝了一口后，助理又半蹲着接过水。余承东在华为排位第几？第一梯队：轮值董事长，目前由徐直军、孟晚舟、汪涛三位副董事长轮流出任。他们是公司最高领袖。但全球货币(全球货币 Global Money)研究，在华为17人组成的董事会中，余承东属于前5-8名的核心决策者。而作为创始人，任正非直接持股约0.7%，但他拥有“否决权”。

全球货币 Global Money

237,059 Aufrufe • vor 4 Monaten

余承东前不久称“从其他行业来的这个公司只做一款车就卖爆了。虽然他的产品可能不是那么好，但卖得很爆”，外界解读为余承东所指为小米。雷军今日发布微博表示，刚学会一句莫言名言：诋毁，本身就是一种仰望。不过莫言并未说过这句话，目前，雷军已删除这条微博。

余承东前不久称“从其他行业来的这个公司只做一款车就卖爆了。虽然他的产品可能不是那么好，但卖得很爆”，外界解读为余承东所指为小米。雷军今日发布微博表示，刚学会一句莫言名言：诋毁，本身就是一种仰望。不过莫言并未说过这句话，目前，雷军已删除这条微博。

王局志安

165,914 Aufrufe • vor 1 Jahr

罗永浩爆料：华为余承东不讲诚信，借收购名义当面挖我的首席研发和产品近日，华为称要与一位开发者合作，但获得技术后没履行承诺，反而将该技术据为己有，绕过该开发者进行后续开发。此事并非孤例，去年，罗永浩也曾曝光余承东以收购为幌子挖走了他们公司的研发人才。

罗永浩爆料：华为余承东不讲诚信，借收购名义当面挖我的首席研发和产品近日，华为称要与一位开发者合作，但获得技术后没履行承诺，反而将该技术据为己有，绕过该开发者进行后续开发。此事并非孤例，去年，罗永浩也曾曝光余承东以收购为幌子挖走了他们公司的研发人才。

魔都老猿

176,842 Aufrufe • vor 3 Monaten

余承东说中国整个汽车产业都在学习问界M9，新M9要让他们永远追不上。评论区：本来对华为印象挺好的，看了这段视屏我沉默了手机，电脑，汽车，所有的都是遥遥领先，说的是价格吧别人三年造一款车，这个是一年造四款车，哪个车企追的上，已经做到全球遥遥领先了我考30分，所有的人都在学我🤣

余承东说中国整个汽车产业都在学习问界M9，新M9要让他们永远追不上。评论区：本来对华为印象挺好的，看了这段视屏我沉默了手机，电脑，汽车，所有的都是遥遥领先，说的是价格吧别人三年造一款车，这个是一年造四款车，哪个车企追的上，已经做到全球遥遥领先了我考30分，所有的人都在学我🤣

默默

31,979 Aufrufe • vor 3 Monaten

黄仁勋一直以来都是说话很得体，谁都不得罪，更不会跟人红脸。但前两天在一档播客里，他居然破防了。为什么呢？就因为一个话题：是不是应该把英伟达的芯片卖给中国。主持人认为，中国现在缺算力，所以不能帮中国缓解瓶颈，否则，先把Mythos这种模型做出来的可能就是中国公司了。但老黄认为，中国能源比美国多，有全世界50%以上的AI研究员，硬件上早晚会追上，所以，卡脖子没意义。但因为要卡中国脖子，而让中国的开源模型不得不围绕华为生态做优化，长期来看，美国的技术栈输出会面临一个强大的竞争对手，所以长期来看，卡中国脖子得不偿失。你觉得谁说的对呢？欢迎观看视频。

黄仁勋一直以来都是说话很得体，谁都不得罪，更不会跟人红脸。但前两天在一档播客里，他居然破防了。为什么呢？就因为一个话题：是不是应该把英伟达的芯片卖给中国。主持人认为，中国现在缺算力，所以不能帮中国缓解瓶颈，否则，先把Mythos这种模型做出来的可能就是中国公司了。但老黄认为，中国能源比美国多，有全世界50%以上的AI研究员，硬件上早晚会追上，所以，卡脖子没意义。但因为要卡中国脖子，而让中国的开源模型不得不围绕华为生态做优化，长期来看，美国的技术栈输出会面临一个强大的竞争对手，所以长期来看，卡中国脖子得不偿失。你觉得谁说的对呢？欢迎观看视频。

Ben X

39,114 Aufrufe • vor 4 Monaten

Dario Amodei 这段谈 AI 竞争，信息量挺大。很多人以为中国开源模型追上来以后，前沿模型公司的护城河就没了。但 Dario 的判断刚好相反：在 AI 里，真正的护城河不是开不开源，也不是谁模型更多。而是 intelligence 本身。他说得很直白：大家不会为了便宜一点、开放一点，就长期接受“没那么聪明”的模型。只要前沿模型每年还在 10 倍级别增长，领先者和追赶者之间就不是差一点，而是可能差一个时代。

Dario Amodei 这段谈 AI 竞争，信息量挺大。很多人以为中国开源模型追上来以后，前沿模型公司的护城河就没了。但 Dario 的判断刚好相反：在 AI 里，真正的护城河不是开不开源，也不是谁模型更多。而是 intelligence 本身。他说得很直白：大家不会为了便宜一点、开放一点，就长期接受“没那么聪明”的模型。只要前沿模型每年还在 10 倍级别增长，领先者和追赶者之间就不是差一点，而是可能差一个时代。

Vincent

73,191 Aufrufe • vor 2 Monaten

【为什么中美俄同时选择在2025年阅兵呢？】现在有些西方国家在篡改二战事实，恶意改小了中国、俄罗斯对于第二次世界大战的影响力与功绩，中国14年抗战一直只能说是8年全面抗战与东三省沦陷这个说法，为了正本清源，为了修正一些恶意国家的行为，更为了抗日战争死去的超过3500万中国同胞们，我们必须发出更大更有力量的声音，因为强盗只认得拳头，认不得道理！那就让它们看看砂锅大的拳头！

【为什么中美俄同时选择在2025年阅兵呢？】现在有些西方国家在篡改二战事实，恶意改小了中国、俄罗斯对于第二次世界大战的影响力与功绩，中国14年抗战一直只能说是8年全面抗战与东三省沦陷这个说法，为了正本清源，为了修正一些恶意国家的行为，更为了抗日战争死去的超过3500万中国同胞们，我们必须发出更大更有力量的声音，因为强盗只认得拳头，认不得道理！那就让它们看看砂锅大的拳头！

零敲牛皮糖537.7

15,758 Aufrufe • vor 1 Jahr

年前多关注ai板块吧中国人参与多的就会有买单！就会有市场🤟 中国开源模型下载量首超美国，一场新的科技竞速正式打响！还在觉得全球 AI 只看硅谷？ MIT × Hugging Face 最新联合报告告诉你：过去一年，全球开源 AI 模型下载量中，中国占比 17% —— 首次超过美国的 15.8%。这不是一个小数点的变化，这是 AI 格局的一声惊雷。意味着一个事实正在出现：中国 AI，不再只是“追赶者”，而是实实在在的“生态领跑者”。一、为什么这个数据爆炸性这么强？开源模型下载量，是 AI 世界最真实的“民意投票”。谁被用、谁被复用、谁被拿去做产品，下载量不会说谎。它比论文数量更接地气，比发布会更诚实，比概念 PPT 更真实。下载量高 = 模型真的“好使”“好用”“好落地”。而这一回，中国冲到第一名，意味着什么？全球开发者正在越来越多地选择中国模型。中国模型正在成为国际生态的一部分，而不是“区域性产品”。中国的 AI 创新正在进入全球循环，而非单向输入。一句话：中国不只在做模型，而是在影响世界开发者。二、为什么中国能“后来居上”？三大原因让人无法忽视 ① 模型数量爆发式增长：百花齐放，开发者用不过来过去一年，中国的开源模型生态堪称“井喷式”增长：中小模型、大模型、多模态、语音、图像…… 能开的都开了，能放的都放了。数量足够大，就能吸引足够多的开发者。 ② 性价比 + 轻量化：世界都在找中国模型“省钱神器” 不是每个团队都训练得起千亿级大模型。但每个团队都想部署一个能跑的模型。而中国模型的特质就是四个字：轻、快、省、能打。全球开发者当然爱。 ③ 中文生态的辐射效应：从东亚扩散到整个亚洲中文模型强，意味着东亚、东南亚用户都能直接受益。更大的人群、更高的需求，带来了更快的下载增长三、美国依然很强，但“唯一主导”时代正在改变必须说，美国仍然拥有：世界最顶级的基础研究算力、芯片、科研体系的深度优势 OpenAI / Google / Meta 等头部力量但这一次的反超给了全球一个清晰的信号： AI 生态不再是“一家独大”。多极化时代正在加速到来。全球开发者的选择，正在慢慢从“硅谷中心论”转向“多中心协作”。四、全球 AI 正进入“群雄争霸”时代这次排名变化背后，是全球 AI 赛道进入全新阶段的标志： ① 从“技术竞赛”升级为“生态竞赛” 谁的模型被更多人用，谁就占据未来话语权。 ② 开源力量影响全球，而中国是关键节点中国模型从“区域下载”变成“全球下载”，这是过去没有出现过的格局。 ③ 创新不再只来自单一地区 AI 正在走向：中国能打、美国能打、欧洲能打、世界都能打。这种竞争更健康，也更刺激。五、结语：这不是终点，而是 AI 全球化的真正开始中国开源模型首次登顶，并不是“谁碾压谁”的故事。它真正意味着：全球 AI，正在进入一个更开放、更多样、更具创造力的新纪元。当中国模型被全球开发者下载、复用、再创造这才是 AI 生态最值得期待的未来。

年前多关注ai板块吧中国人参与多的就会有买单！就会有市场🤟 中国开源模型下载量首超美国，一场新的科技竞速正式打响！还在觉得全球 AI 只看硅谷？ MIT × Hugging Face 最新联合报告告诉你：过去一年，全球开源 AI 模型下载量中，中国占比 17% —— 首次超过美国的 15.8%。这不是一个小数点的变化，这是 AI 格局的一声惊雷。意味着一个事实正在出现：中国 AI，不再只是“追赶者”，而是实实在在的“生态领跑者”。一、为什么这个数据爆炸性这么强？开源模型下载量，是 AI 世界最真实的“民意投票”。谁被用、谁被复用、谁被拿去做产品，下载量不会说谎。它比论文数量更接地气，比发布会更诚实，比概念 PPT 更真实。下载量高 = 模型真的“好使”“好用”“好落地”。而这一回，中国冲到第一名，意味着什么？全球开发者正在越来越多地选择中国模型。中国模型正在成为国际生态的一部分，而不是“区域性产品”。中国的 AI 创新正在进入全球循环，而非单向输入。一句话：中国不只在做模型，而是在影响世界开发者。二、为什么中国能“后来居上”？三大原因让人无法忽视 ① 模型数量爆发式增长：百花齐放，开发者用不过来过去一年，中国的开源模型生态堪称“井喷式”增长：中小模型、大模型、多模态、语音、图像…… 能开的都开了，能放的都放了。数量足够大，就能吸引足够多的开发者。 ② 性价比 + 轻量化：世界都在找中国模型“省钱神器” 不是每个团队都训练得起千亿级大模型。但每个团队都想部署一个能跑的模型。而中国模型的特质就是四个字：轻、快、省、能打。全球开发者当然爱。 ③ 中文生态的辐射效应：从东亚扩散到整个亚洲中文模型强，意味着东亚、东南亚用户都能直接受益。更大的人群、更高的需求，带来了更快的下载增长三、美国依然很强，但“唯一主导”时代正在改变必须说，美国仍然拥有：世界最顶级的基础研究算力、芯片、科研体系的深度优势 OpenAI / Google / Meta 等头部力量但这一次的反超给了全球一个清晰的信号： AI 生态不再是“一家独大”。多极化时代正在加速到来。全球开发者的选择，正在慢慢从“硅谷中心论”转向“多中心协作”。四、全球 AI 正进入“群雄争霸”时代这次排名变化背后，是全球 AI 赛道进入全新阶段的标志： ① 从“技术竞赛”升级为“生态竞赛” 谁的模型被更多人用，谁就占据未来话语权。 ② 开源力量影响全球，而中国是关键节点中国模型从“区域下载”变成“全球下载”，这是过去没有出现过的格局。 ③ 创新不再只来自单一地区 AI 正在走向：中国能打、美国能打、欧洲能打、世界都能打。这种竞争更健康，也更刺激。五、结语：这不是终点，而是 AI 全球化的真正开始中国开源模型首次登顶，并不是“谁碾压谁”的故事。它真正意味着：全球 AI，正在进入一个更开放、更多样、更具创造力的新纪元。当中国模型被全球开发者下载、复用、再创造这才是 AI 生态最值得期待的未来。

加密大师兄

22,361 Aufrufe • vor 9 Monaten

美团（3690 HK）股价今日在香港开盘后一度上涨逾7%，原因是市场传出此前爆火的“神秘”开源AI模型 Owl Alpha 实际上属于美团。虽然美团最初并未以 Owl Alpha 的名称发布该模型，但多项技术特征以及后续披露的信息均表明，它实际上属于美团 LongCat（龙猫）大模型家族。Owl Alpha 最早在 OpenRouter 上线时并未公开开发者身份。随后开发者发现，它具备以下特征： • 高达 100万Token 的上下文窗口 • 强大的工具调用（Tool Calling）和 AI Agent 能力 • 与中国模型对齐策略一致的行为表现 • 多处代码和输出痕迹指向美团 LongCat 系统该模型主要面向 AI Agent，而非传统聊天机器人。目前，Owl Alpha 已跻身 OpenRouter 全球 API 调用量前三的模型。这也是美团更大AI战略的一部分。自2023年收购AI初创公司 Light Year（光年之外）后，美团持续加大对基础大模型的投入。2025年，公司开源了 LongCat-Flash-Chat，随后又发布 LongCat-Flash-Thinking-2601，其在工具调用（Tool Calling）和 Agent 推理能力方面达到了开源模型中的全球领先水平。

美团（3690 HK）股价今日在香港开盘后一度上涨逾7%，原因是市场传出此前爆火的“神秘”开源AI模型 Owl Alpha 实际上属于美团。虽然美团最初并未以 Owl Alpha 的名称发布该模型，但多项技术特征以及后续披露的信息均表明，它实际上属于美团 LongCat（龙猫）大模型家族。Owl Alpha 最早在 OpenRouter 上线时并未公开开发者身份。随后开发者发现，它具备以下特征： • 高达 100万Token 的上下文窗口 • 强大的工具调用（Tool Calling）和 AI Agent 能力 • 与中国模型对齐策略一致的行为表现 • 多处代码和输出痕迹指向美团 LongCat 系统该模型主要面向 AI Agent，而非传统聊天机器人。目前，Owl Alpha 已跻身 OpenRouter 全球 API 调用量前三的模型。这也是美团更大AI战略的一部分。自2023年收购AI初创公司 Light Year（光年之外）后，美团持续加大对基础大模型的投入。2025年，公司开源了 LongCat-Flash-Chat，随后又发布 LongCat-Flash-Thinking-2601，其在工具调用（Tool Calling）和 Agent 推理能力方面达到了开源模型中的全球领先水平。

亚洲股市 AsiaStock

22,792 Aufrufe • vor 2 Monaten

OpenAI 创始人 John Schulman 访谈节选：为什么 GPT-4 比一年前更“聪明”了？主要都是后训练（Post-Training）带来的！另外他认为，在强化学习研究领域，研究人员需要具备丰富的经验和敏锐的直觉。了解整个技术堆栈，并对各个部分充满好奇心是关键。此外，从第一性原理出发思考问题，而不仅仅依靠实验证据，也能够帮助研究人员在数据操控和环境设置方面做出更好的决策。 *** Dwarkesh Patel：在未来，用于训练的计算力中，预训练与后训练的比例是否会明显偏向后训练呢？ John Schulman：确实，有一些观点支持这种说法。 Dwarkesh Patel：我是说，现在这个比例非常不平衡。 John Schulman：但你可以认为，模型生成的输出质量比网上的大多数内容都要高。因此，让模型自己思考似乎更有道理，而不仅仅是训练来模仿网络上的内容。所以，我认为从第一性原理上来说，这是有说服力的。我会说，我们通过后训练取得了很多进步。因此，我不确定。所以，我希望我们会继续推动这种方法，并且可能会增加投入到后训练中的计算力。 Dwarkesh Patel：当前的 GPT-4 的 ELO 分数比最初发布的版本高出了大约 100 分。这是否全都是后训练带来的改进呢？ John Schulman：对，我会说大部分都是后训练带来的。 Dwarkesh Patel：这很有意思。 John Schulman：因此，有很多不同的改进方向。我们会考虑数据质量，数据数量，进行更多的部署和收集新数据的迭代，改变你收集的注解种类。因此，有很多因素叠加在一起。但是全部加在一起，就会带来一个相当不错的，有效的计算力提升。 Dwarkesh Patel：后训练的优化程度对于竞争优势有多大影响呢？ John Schulman：目前，我会区别公司是通过我们的模型有多大等等。那么，找出你之前提到的所有这些数据的复杂问题的公司，会占据大优势吗？ John Schulman：我认为这确实是一个优势，因为这是一个非常复杂的任务。因此，你必须有很多有技能的人来执行它。因此，存在大量的隐性知识。同时也需要大量的组织知识。我认为后训练的过程，创建一个具备人们所关心的所有功能的模型，是十分复杂的。这需要付出大量的努力，它是大量研发工作的积累。我会说这种情况在某种程度上形成了一种壁垒，要想立即启动这种模型并非易事。 Dwarkesh Patel：看起来那些正在进行最严肃的预训练努力的公司，也在进行严肃的后训练努力。因此，看起来这种模型有可能被复制或有更多的类似努力出现。 John Schulman：另外，还有一种情况使得这个壁垒并非那么明显，那就是你可以提取模型，或者复制别人的模型输出，或者使用别人的模型进行比较。我认为大公司可能并不会这样做，因为这违反了服务条款，也会损害他们的自尊心，但我预计一些规模较小的参与者可能正在这样做以便更好地起步。 Dwarkesh Patel：那些真正擅长进行这种强化学习（RL）研究的人有什么样的特质呢？我听说这种研究非常具有挑战性，但是什么样的直觉能帮助你找到操控数据和设置环境的方法呢？ John Schulman：我觉得有相当多的经验是关键。自从研究生时期以来，我一直在研究 RL 算法，涉及到数据收集、到注释过程，再到与语言模型的交互。所以，我算是涉猎了这些领域。我认为，在这类研究中表现出色的人通常对整个技术堆栈有全面的了解，并且对其中的各个部分充满好奇心。他们不仅依靠实验证据来更新自己的观点，还会从第一性原理出发思考问题。比如，假设深度学习是有效的，那么理想的收集数据的类型应该是什么，等等。

OpenAI 创始人 John Schulman 访谈节选：为什么 GPT-4 比一年前更“聪明”了？主要都是后训练（Post-Training）带来的！另外他认为，在强化学习研究领域，研究人员需要具备丰富的经验和敏锐的直觉。了解整个技术堆栈，并对各个部分充满好奇心是关键。此外，从第一性原理出发思考问题，而不仅仅依靠实验证据，也能够帮助研究人员在数据操控和环境设置方面做出更好的决策。 *** Dwarkesh Patel：在未来，用于训练的计算力中，预训练与后训练的比例是否会明显偏向后训练呢？ John Schulman：确实，有一些观点支持这种说法。 Dwarkesh Patel：我是说，现在这个比例非常不平衡。 John Schulman：但你可以认为，模型生成的输出质量比网上的大多数内容都要高。因此，让模型自己思考似乎更有道理，而不仅仅是训练来模仿网络上的内容。所以，我认为从第一性原理上来说，这是有说服力的。我会说，我们通过后训练取得了很多进步。因此，我不确定。所以，我希望我们会继续推动这种方法，并且可能会增加投入到后训练中的计算力。 Dwarkesh Patel：当前的 GPT-4 的 ELO 分数比最初发布的版本高出了大约 100 分。这是否全都是后训练带来的改进呢？ John Schulman：对，我会说大部分都是后训练带来的。 Dwarkesh Patel：这很有意思。 John Schulman：因此，有很多不同的改进方向。我们会考虑数据质量，数据数量，进行更多的部署和收集新数据的迭代，改变你收集的注解种类。因此，有很多因素叠加在一起。但是全部加在一起，就会带来一个相当不错的，有效的计算力提升。 Dwarkesh Patel：后训练的优化程度对于竞争优势有多大影响呢？ John Schulman：目前，我会区别公司是通过我们的模型有多大等等。那么，找出你之前提到的所有这些数据的复杂问题的公司，会占据大优势吗？ John Schulman：我认为这确实是一个优势，因为这是一个非常复杂的任务。因此，你必须有很多有技能的人来执行它。因此，存在大量的隐性知识。同时也需要大量的组织知识。我认为后训练的过程，创建一个具备人们所关心的所有功能的模型，是十分复杂的。这需要付出大量的努力，它是大量研发工作的积累。我会说这种情况在某种程度上形成了一种壁垒，要想立即启动这种模型并非易事。 Dwarkesh Patel：看起来那些正在进行最严肃的预训练努力的公司，也在进行严肃的后训练努力。因此，看起来这种模型有可能被复制或有更多的类似努力出现。 John Schulman：另外，还有一种情况使得这个壁垒并非那么明显，那就是你可以提取模型，或者复制别人的模型输出，或者使用别人的模型进行比较。我认为大公司可能并不会这样做，因为这违反了服务条款，也会损害他们的自尊心，但我预计一些规模较小的参与者可能正在这样做以便更好地起步。 Dwarkesh Patel：那些真正擅长进行这种强化学习（RL）研究的人有什么样的特质呢？我听说这种研究非常具有挑战性，但是什么样的直觉能帮助你找到操控数据和设置环境的方法呢？ John Schulman：我觉得有相当多的经验是关键。自从研究生时期以来，我一直在研究 RL 算法，涉及到数据收集、到注释过程，再到与语言模型的交互。所以，我算是涉猎了这些领域。我认为，在这类研究中表现出色的人通常对整个技术堆栈有全面的了解，并且对其中的各个部分充满好奇心。他们不仅依靠实验证据来更新自己的观点，还会从第一性原理出发思考问题。比如，假设深度学习是有效的，那么理想的收集数据的类型应该是什么，等等。

宝玉

57,175 Aufrufe • vor 2 Jahren

好家伙，被这场直播彻底震惊。研究 12 年因果 AI 的华人，把我对大模型的认知改变了：你们天天用的 LLM，本质是在死记硬背。 AI 圈“以胖为美”，因为模型在死记硬背，见过的一切全背下来，模型没到 TB 级，都不好意思说在做 LLM。但你想想上学那会，班里牛逼的同学，都是把公式吃透的，因为题目是无限的，公式是有限的。物理世界同理：数据无限，背后的规律有限。用无限堆数据的方式去逼近有限的东西，方向本身有问题。这是黄碧薇教授 Biwei Huang 在极客公园直播里提到的，她判断下一代范式是真正理解规律的因果世界模型。模型一旦真的理解规律，体格直接小一个量级。同样的数据，她们的因果世界模型成功率高 25-50%，样本省 5-10 倍。强烈大家看一看完整对话：

好家伙，被这场直播彻底震惊。研究 12 年因果 AI 的华人，把我对大模型的认知改变了：你们天天用的 LLM，本质是在死记硬背。 AI 圈“以胖为美”，因为模型在死记硬背，见过的一切全背下来，模型没到 TB 级，都不好意思说在做 LLM。但你想想上学那会，班里牛逼的同学，都是把公式吃透的，因为题目是无限的，公式是有限的。物理世界同理：数据无限，背后的规律有限。用无限堆数据的方式去逼近有限的东西，方向本身有问题。这是黄碧薇教授 Biwei Huang 在极客公园直播里提到的，她判断下一代范式是真正理解规律的因果世界模型。模型一旦真的理解规律，体格直接小一个量级。同样的数据，她们的因果世界模型成功率高 25-50%，样本省 5-10 倍。强烈大家看一看完整对话：

余温

24,649 Aufrufe • vor 2 Monaten