Hugging Face CEO 德朗格:AI 末日概率近零,闭门开发才是真风险

资讯 AI 科技快讯 作者:赢政天下 全文 1946 字 · 约 5 分钟读完 配图 1 张 分类HuggingFace开源

Hugging Face首席执行官克莱芒·德朗格近日表示,他个人对AI引发末日级风险的估计(P(Doom))接近于零。在他看来,外界高估了模型失控的概率,却低估了风险的真实来源:少数几家公司在闭门环境中开发最强模型,外界无从审查。这场围绕开源与闭源的争论,实质上是关于AI治理透明度与责任分配的争论。

所属频道 开源生态
Hugging Face CEO:AI末日概率接近零,封闭开发才是真风险
Hugging Face 首席执行官克莱芒·德朗格最近谈了自己对 AI 末日级风险的判断:他个人给出的 P(Doom) 接近于零。在他眼里,模型失控的概率被外界高估了,反倒是有少数几家公司关起门来做最强模型、外部根本没法审查这件事,被低估了。开源与闭源这场争论,说到底争的是 AI 治理透不透明、责任怎么分。

AI 安全争论这些年越来越两极化,德朗格(Clément Delangue)却给出了一个挺“不合群”的看法:AI 带来末日级风险的主观概率,也就是所谓的“P(Doom)”,在他看来接近于零。

这个说法出自他和《连线》(WIRED)的一次对话。德朗格认为,人们对 AI 失控的恐惧被明显放大了,真正该警惕的风险来源反而没人看。说到开源 AI 为什么必要,他的理由很直接:大部分风险,其实是少数几个玩家在闭门造车时造出来的。

什么是 P(Doom)?一个被反复引用的数字

P(Doom) 是近年在 AI 安全圈流行起来的说法,指的是“AI 导致人类灭绝或文明不可逆衰败”发生的主观概率。它算不上严谨的统计指标,更像是把模糊的担忧折算成一个数:研究者、创业者、政策制定者总被追问“你估多少”,答案的跨度却大得离谱——有人乐观到不足 1%,也有人给出两位数的高危判断。

德朗格把自己放在了光谱最乐观的那一端。不过“接近于零”不等于“零”:它更像一种姿态,用来对抗一种叙事——把 AI 当成某种随时会失控、说不清道不明的东西,而这种叙事在他看来已经过度占据了公共讨论。他真正想做的,是把焦点挪开。

风险并非均匀分布

“大部分风险实际上是由少数几个玩家在闭门造车时创造的。”——克莱芒·德朗格

这句话分两层看。一层是结构上的:最强的模型如果只握在极少数公司手里,训练数据、权重、评测方法和安全措施外界都查不到,风险就集中在一处、看不见,外部也很难纠正。另一层是方法上的:开源把模型交到数以百万计的开发者、研究者和红队测试者手上,失效模式、偏见、滥用路径才可能在公开环境里被发现、被讨论。

这和 Hugging Face 一直以来的定位对得上。作为全球最大的开源模型与数据集社区之一,它的商业模式和生态影响力都建立在“开放权重、公开评测、社区协作”上。德朗格这番话有他一贯的理念成分,也难免带着立场——读的时候得把这一点算进去。

开源与闭源:一场关于“谁有权检查”的路线之争

这几年,AI 行业在开放权重上分出了两条清楚的路线。一条以 Meta 的 Llama 系列、Mistral 以及众多来自中国和欧洲的模型为代表,主张用开放权重压低门槛、加快创新、分散权力;另一条由少数前沿实验室牵头,主张能力到了一定阈值就限制权重扩散,理由是“一旦发布就收不回来”。

监管这一头也在来回摆。欧盟《人工智能法案》给通用目的模型设了透明度与系统性风险评估义务,但“开放权重该不该豁免”一直吵得很凶;美国加州的 SB 1047 等立法尝试,则把争论引到“该管模型能力,还是该管部署行为”上。德朗格的论点其实给其中一派递了弹药:如果风险主要来自封闭开发,监管的核心工具就该是外部审计、透明度披露和第三方评测,而不是简单卡住权重发布。

质疑者的反驳:开源同样会放大能力

反对的声音不难找。批评者说,开放权重一旦放出去就召不回,安全对齐在微调阶段很容易被剥掉,恶意行为者拿到能力的成本因此大降。换句话说,开源让“防御者”变强,也让“攻击者”变强,这种不对称未必总偏向善的一边。也有人认为,“闭门”本身不是风险来源,模型能力才是——能力越强,放在哪儿都得严格治理。

德朗格的回应里藏着一个前提:透明度本身就是一种安全机制。一个能被成千上万人拆开、测试、批评的模型,比一个只对内部审计团队开放的模型更容易暴露问题。这个说法在软件安全史上不是没有先例,但能不能搬到能力快速跃迁的前沿 AI 系统上,还是个开放问题。

编者按:争论的真正焦点不是开源,而是可见性

把德朗格的表态简单读成“开源阵营的公关话术”,就看偏了。这场辩论真正争的,是谁有权检查最强的系统、谁为系统失效担责、治理该发生在模型发布之前还是之后。他的 P(Doom) 接近于零,与其说是在测量风险,不如说是在挑战风险叙事由谁分配:当恐惧被集中投射到“AI 本身”上,具体公司的具体决策就从视野里消失了。

站得住脚的态度大概是双向的:既承认开放权重带来的扩散风险需要配套的责任机制,也承认封闭开发造成的审查真空同样是一种风险。德朗格把问题提对了,但答案不会只属于任何一方。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. Hugging Face CEO:AI末日概率接近零,封闭开发才是真风险

    Hugging Face首席执行官克莱芒·德朗格近日表示,他个人对AI引发末日级风险的估计(P(Doom))接近于零。在他看来,外界高估了模型失控的概率,却低估了风险的真实来源:少数几家公司在闭门环境中开发最强模型,外界无从审查。这场围绕开源与闭源的争论,实质上是关于AI治理透明度与责任分配的争论。

    来源 AI 行业观察
  2. Hugging Face谈开源AI:免费的模型,昂贵的账单

    开源AI模型正从边缘走向主流,企业、政府和初创公司都对其低成本、高控制和灵活性寄予厚望。然而,随着能力越来越强的模型免费开放,商业价值如何捕获?中国开源力量崛起,美国玩家能否守住优势?Hugging Face政策负责人围绕成本、风险与权衡展开深度剖析,为开源AI的可持续发展提供关键思考。

    来源 AI 行业观察
  3. Hugging Face谈开源AI谁在赚钱:模型不再稀缺,价值流向系统与算力

    开源大模型正从技术圈的小众实验,变成企业、政府和初创公司共同押注的基础设施。低成本、可控性、灵活性构成了它的吸引力,但当能力越来越容易获得,商业价值究竟落在谁手里?TechCrunch本期节目邀请Hugging Face,围绕价值捕获路径展开讨论,并直面一个更尖锐的问题:面对来势汹汹的中国开源模型,美国玩家还能不能跟上

    来源 AI 行业观察
  4. Hugging Face推模型集成合约:微型模型如何在主分支前拦下回归Bug

    Transformers 库支持七百多种模型,全量测试成本极高。Hugging Face 团队提出“模型集成合约”(MIC),通过构建保留架构特征的微型模型(Fixture),在 CPU 上快速运行典型用例并比对基线。该方法成功捕获了 UMT5 模型中潜伏两个月的注意力机制 Bug。文章详解了微型模型的构建流程、随机权

    来源 AI 应用前沿
  5. CWE-bench v2发布:100个真实漏洞任务,测试AI安全修复能力

    Collinear AI发布了CWE-bench v2基准测试,包含100个基于真实开源代码库的安全修复任务。该基准覆盖91种常见漏洞类型,强调自动化评分和可复现性。目前Gemini 4 Argon以67.8%的通过率领先,但仍有近两成任务未被任何模型解决。文章介绍了测试结果、成本效益分析及如何在Hugging Fac

    来源 AI 应用前沿
  6. 蔡崇信:千问开源470款模型,开源是AI普及钥匙?

    2026 世界互联网大会 11 月 3 日在乌镇开幕,阿里巴巴联合创始人、董事会主席蔡崇信在开幕式上亮出一组数字:阿里千问已开源超过 470 款模型,全球累计下载量突破 40 亿,衍生模型超过 33 万。在他看来,AI 需求持续攀升、算力供不应求的背景下,"只有开源才能普及"——开源能把中小企业的研发成本压下来,对发展

    来源 AI 开发者社区
  7. MLCommons上线Candela:Safety 1.2.1与Jailbreak 1.1可按需跑测

    MLCommons近日发布AILuminate Safety 1.2.1和Jailbreak 1.1两项基准,开发者可通过Candela服务自测AI系统产生有害内容的风险及抗攻击能力。基准由80多家机构共识构建,覆盖12类危害场景,并采用确定性评估器提升准确性。公开结果显示27个系统表现差异显著,开放权重模型从第4到9

    来源 AI 科技快讯
  8. 乌镇峰会开幕:中外科技企业争夺AI下一程

    ◎记者 郭成林 杨翔菲 11月3日,2026年世界互联网大会乌镇峰会开幕。全球科技企业的目光再次聚焦这座江南古镇,共同探讨人工智能(AI)发展的下一程。 “只有开源才能普及,只有普及才能创造可持续、普惠的智能时代。”阿里巴巴集团董事会主席蔡崇信在开幕式上的发言,揭示了中国科技企业参与全球AI竞争的一条重要路径。 过..

    来源 腾讯网
  9. 苹果开放Siri第三方AI调用,Anthropic开源模型验证协议

    本期资讯涵盖多项AI基础设施与应用层更新。苹果在iOS 27.3预览版中允许第三方应用接入Siri AI操作,结合个人上下文执行任务。Anthropic开源FlashProve,利用zkSNARK技术在不泄露权重的前提下验证模型输出身份。openJiuwen发布Agent-Memory,引入视听双流记忆以优化长视频理解

    来源 AI 应用前沿
  10. 万字深度|中国人造出了那台“造AI的光刻机”吗?

    就在这两天,ForgeKernel,一个无人参与的Agent在无需参考DeepSeek原始实现的情况下,当着全网的面,把DeepSeek最新的核心算子写快了9.8%!FlashMLA是DeepSeek开源的注意力核心算子库,10月20日刚开源的推理框架DeepInfer也把它集成在内;它出自业内公认Infra最强的团队

    来源 腾讯网
  11. 陈睿乌镇演讲:AI时代内容创作,人类主导才是最好的内容?

    11 月 4 日下午消息,哔哩哔哩董事长兼 CEO 陈睿出席 2026 年世界互联网大会乌镇峰会,并在互联网企业家论坛上发表《AI 时代的内容创作》主题演讲。 陈睿表示,最好的内容一定是由人类来主导创作。在他看来,优秀的作品不仅需要技术呈现,更需要创作者的个人表达。最好的内容,内核是触达人心。让作品获得观众认可的,是创

    来源 AI 行业观察
  12. 陈睿乌镇谈AI创作:最好的内容内核是触达人心

    11月4日,哔哩哔哩董事长兼CEO陈睿出席2026年世界互联网大会乌镇峰会,并在互联网企业家论坛上,以“AI时代的内容创作”为主题发表演讲。 陈睿表示,最好的内容一定是由人类来主导创作

    来源 快科技
  13. 扣子企业版、腾讯元器接连下线:大厂AI产品整合提速

    近日,字节旗下AI应用开发平台扣子(Coze)发布《扣子企业版下线公告》,企业标准版与企业旗舰版将于2026年11月30日起停止接受新客户购买,存量套餐最晚于2027年12月31日全面下线,超期未使用部分将自动退款。 一位自称是字节前Coze员工称,Coze这种工作流产品不是被AI淘汰的,而是被“模型自己会规划”淘汰的

    来源 AI 行业观察
  14. 虎鲸文娱鲸锐AI平台上线:单分钟AI视频成本降三成

    【TechWeb】11月4日消息,虎鲸文娱集团打造的行业首个AI影视制作与管理平台“鲸锐AI”正式上线。鲸锐AI平台聚焦AI视频制作过程精准可控、银幕级质感成片交付、成本可管理三大目标,集成了市面上50余个主流AI视频生成模型与10余个自研模型,无限画布支持千级节点、百人实时协同创作。通过鲸锐AI平台的精准控制和流程优

    来源 AI 行业观察
  15. Nothing下月发AI优先新设备:形态未明,主打生产力

    智能手机初创公司Nothing的CEO近日透露,公司正在打造一款以AI为核心的神秘设备,并计划于下个月正式发布。目前该产品的具体形态仍是谜团,但官方表示其设计初衷是利用人工智能大幅提升生产力。在AI硬件屡遭质疑的当下,Nothing能否凭借设计基因和软件体验突出重围,成为市场关注的焦点。

    来源 AI 科技快讯
向下滚动自动加载更多