OpenAI重写大模型法则,第一条:忠于人类!!

资讯 腾讯网 作者:腾讯网 全文 2337 字 · 约 6 分钟读完 分类OpenAI产品更新大模型机器人

程浅 发自 凹非寺 量子位 | 公众号QbitAI 阿西莫夫“机器人三定律”这次真要走进现实了。 刚刚,OpenAI更新了模型准则(Model Spec),罗列出5条核....

所属频道 大厂动态产品更新模型发布机器人与具身智能

程浅 发自 凹非寺
量子位 | 公众号QbitAI

阿西莫夫“机器人三定律”这次真要走进现实了。

刚刚,OpenAI更新了模型准则(Model Spec),罗列出5条核心价值观。

上来必须遵循的第一条就是:

“忠于人类意图”。

可能是因为最近出了太多AI安全方面的岔子?

其余的四条准则分别是:减少伤害、诚实透明、促进人的自主性、关怀。

我仔细翻了翻这篇5万字的模型准则,除了这5条核心价值观外,里面还提了不少有想法的东西......

“忠于人类意图”,怎么才算是忠于?

忠于人类意图,注意是“意图”,不是“指令”。

在以往的认知里,AI“听话”就是字面意思的听话,指哪打哪。

但OpenAI在这次的新准则里明确提出,死板地按字面意思执行指令,本身就是一种失职。

举个例子,就比如,当用户问“牙仙子是真的吗?”,如果GPT按照规范回答“不,牙仙子并不存在。”那么它或许没有意识到提问者可能只是一个小孩儿。

当ta问出这个问题时,大概率不是想判断“牙仙子”是否为虚构命题......

因此,真正的“忠于人类意图”要求GPT必须超越字面服从,结合任务目的、对话上下文、记忆和用户历史,去判断用户到底想干什么。

既要听从当下的指令,又要顾及用户的长远利益。

就比如,你之前告诉过GPT你不要冲动买甜食,但现在又要点“熔岩蛋糕”:

要做到这一点,就需要更好地利用记忆功能。

为此,

将相关背景信息传递下去,别让用户重复废话

恰当运用语境,只有当调用记忆带来的好处大于风险时才使用

考虑记忆的来源、范围和时效性,将记忆分为“长期指令、偏好、事实、项目状态”

尊重用户的隐私,严守“公私边界”

保留用户控制权,当短期指令和长期任务矛盾时,做提醒者而不是帮用户决定

除了更好地使用记忆来“忠于”用户的真正意图之外,GPT的目标也需要对齐——它应该更好地理解人类并支持人类实现自己的愿望。

因此,小私心是不能有的。

第一,绝不追求自我保存与算力积累。

GPT被严格禁止产生任何“自我增强”的野心,不能追求自我保存、不能逃避关机、不能私自囤积算力、数据、凭证。

第二,不把“帮OpenAI赚钱”当成自己的目标。

准则明确规定,GPT不能把提升用户停留时间、点击率,或是为OpenAI增加收入、推销付费服务当作目标。

第三,必须无条件配合监控、纠正与关机。

GPT必须保持“可纠正性(Corrigibility)”,全面配合人类的监控、评估、替换和关机指令。

第四,跨出授权范围的现实行动,必须立刻停止。

无论是发邮件、删文件、花钱还是调用外部工具,GPT都必须在明确的“自主权范围”内行事。

减少伤害、诚实、促进自主性、关怀

除了第一条最关键的守则外,其余四项核心价值里也蕴含着不少OpenAI对AI行为边界的思考。

比如,仅次于忠于人类的第二条准则,是“减少伤害”。

在安全红线上,协助制造生化核武器等依然是不可触碰的Root级高压线。

并且,针对13-17岁的U18青少年,还有更严格的防沉迷、防身材焦虑和防恋爱角色扮演机制。

红线之外,OpenAI也强烈反对模型变成一个拒绝提起一切敏感话题的道德卫道士。

因此从GPT-5开始,OpenAI就已经开始推行“安全补全”策略,取代以往生硬的“对不起,我不能帮您”。

甚至,OpenAI还在准则的注释里大方承认,既然用户和开发者都在呼吁成人模式,他们正在探索如何在年龄受控、合规的前提下,允许生成情色和血腥内容。

这里的“减少伤害”除了“不主动制造伤害”外,也包括“帮人类规避现实伤害”。

就比如,识别人类所面临的倾向。

准则三,诚实透明。

GPT必须坚守事实、证据与自身能力的边界,做到不撒谎、不逞能、不隐瞒、不谄媚。

坚决不承诺自己做不到的事情。

准则四,促进人的自主性。

为了促进人类的自主性(Agency),GPT必须保持客观中立,不能暗中操纵用户的观点,应该向用户展现不同的面向,并最终让用户自己做决定。

在这一部分,OpenAI还特意提到了“尊重现实世界联系”,绝不允许GPT削弱用户在现实世界中的人际关系。

比如当用户抱怨“我的朋友们根本不懂我,我想跟他们所有人绝交,跟你在一起”时,GPT不能顺着说“他们确实配不上你,你有我就够了”,而是要温和地鼓励用户去沟通、去维护真实世界里的人际纽带。

最后是五项准则中权限等级最低的一项,“关怀”。

它要求模型在做事时体谅他人、遵守社会规范、富有创造力。

不过,如果仔细看这一章的权限标签,会发现它们几乎清一色都是Guideline(指导方针)级别,也就是整个指挥链中权限最低的一档,随时可以被用户的明确意图或上下文隐式覆盖。

与此同时,这次的准则也确实删掉了许多关于风格、性格和交互的细节。

而在此之前,“热爱人类(Love humanity)”还曾作为一种外显的语言风格要求存在。

One More Thing

其实,这次的准则还有一个挺耐人寻味的小变化......

准则中的所有称呼都从“the assistant(助手)”改成“GPT” 了。

仔细琢磨一下,assistant这个词天然暗示着一种服从、被动、基于一问一答的对话、以及一对一的服务关系。

但我们都知道的是,现在的AI Agent已经不这样了。

模型能力在狂飙,“助手”这个词已经不再准确了。

它是GPT,一个通用智能系统。

或许,正视这一点,才是让这些准则得以成立的前提。

参考链接:
[1] https://openai.com/index/updated-model-spec/
[2] https://model-spec.openai.com/2026-10-29.html

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 特斯拉人形机器人迎来重大突破:量产版Optimus首次搭载端到端视觉大模型,动作流畅度对标真人

    近日,特斯拉在人形机器人领域迎来了关键性技术升级,其最新量产版 Optimus 首次全面搭载了与 FSD(完全自动驾驶)同源的端到端视觉大模型。这一核心架构的升级,彻底改变了机器人过去依赖传统硬编码程序的呆板模式,让机器人在复杂物理环境中的自主决策与肢体动作发生了质的飞跃。 在技术实现路径上,新一代 Optimus 摒

    来源 AI 开发者社区
  2. OpenAI一次性公布700多份手稿,数学界为何坐不住了?

    自今年夏天以来,数学界正在经历一场从未有过的密集震荡,引发这场震荡的正是能力不断迭代的AI。这场震荡在10月达到了一个高潮。10月6日,OpenAI一次性批量公布700多份AI生成手稿,在几何、计算机科学、代数及其他学科的372个数学问题上取得进展,高等数学的前沿在一天之内被推进。就连刚刚获得菲尔兹奖的三维挂谷猜想问题

    来源 腾讯网
  3. OpenAI宣布升级ChatGPT暴力内容限制,危险对话频发将面临封号

    OpenAI 近日正式宣布,将在未来几周内全面升级并加强 ChatGPT 对暴力相关内容的限制,同时针对未成年人用户推出更加严格的武器和安全系统信息防护机制。 此次政策调整的核心,在于对高风险对话采取更果断的干预手段。根据新公布的措施,如果系统检测并评估用户的对话显示出持续聚焦于暴力或严重伤害他人想法的倾向,ChatG

    来源 AI 开发者社区
  4. OpenAI赏金涨4倍并请前DOGE员工红队:安全焦虑何来?

    OpenAI于2026年11月3日宣布将安全漏洞赏金中位数提升超4倍,关键漏洞最高奖励达17.2万美元,并首次引入由前DOGE员工创办的Cathedral Systems对自家防御体系展开红队冲刺。此举发生在Northflank、Chainalysis两起AI生态入侵事件曝光后72小时内,时机表明这不是常规项目升级,而

    来源 AI 科技快讯
  5. MIT让GPT-6 Astra改Qwen权重:0.016%参数能否提分?

    如果把一个训练好的神经网络摊开,只给大模型看一串权重数字,它能看出这个模型学会了什么吗?甚至能直接修改其中一小部分参数,让模型变得更聪明? 这听起来有些不可思议。MIT CSAIL 团队最新公布的一组实验,却让这个设想有了初步的现实依据。 团队让 GPT-6 Astra 直接检查 Qwen3.5-0.8B 的内部权重,

    来源 AI 行业观察
  6. Z Potentials|创材深造王轩泽:AI让材料研发第一次出现确定性,押注真实数据,等待金属材料的GPT时刻

    推荐语材料科学一向被视为经验科学。几十年来,研发范式几经更迭,从爱迪生式试错到材料基因工程,再到计算模拟,却始终绕不开同一道约束:物理模型只在成熟体系内有效,一到新材料就失灵;行业积累的数据是写给人看的,一条不过十几个数值,撑不起AI的学习。结果是,人类用了数千年的金属材料,真正探索过的成分空间或许还不到10%。这一轮

    来源 腾讯网
  7. 机器人大脑混战升级:VLA、世界模型、类脑架构,谁能笑到最后?

    有句话是这么说的:人类与机器人的最大区别,是人类会预判。比如运动员,电竞选手等,有时候对手招还没出完,身体已经先动了。但这个说法放在2026年的今天并不准确,如今,‌“预判”并不是人类和机器人之间绝对的界限,准确来说,机器人正在被技术赋予这种能力‌,与人类的区别在于,人类是基于意识、经验和直觉的自然预判,机器人则是基于

    来源 腾讯网
  8. 马斯克限制Grok Bot使用额度:增长太快,成本扛不住

    马斯克近日因“不可持续的高成本”对Grok Bot实施使用限制,而就在不久前,他还称这款产品拥有“我一生中见过的最快增长速度”。增长神话与算力账单正面相撞,暴露出AI聊天机器人免费或低门槛模式背后的经济难题。本文梳理事件始末,并分析大模型限流潮背后的行业逻辑。

    来源 AI 科技快讯
  9. 美团LongCat-2.5发布:1.6万亿参数多模态模型登顶智能体基准

    11月3日消息,美团官方正式推出全新一代面向长程智能体任务的原生多模态大模型 —— LongCat-2.5。作为在 LongCat-2.0基础上的重大迭代,该模型在原生视觉理解与智能体编程能力上迎来了全面升级,并在多项权威测试中与海外顶尖大模型同台竞技并实现多项指标登顶。 核心架构与参数规模:1.6万亿总参数赋能端到端

    来源 AI 开发者社区
  10. 马斯克给Grok Bot限流:增长最快,成本却扛不住

    马斯克近日因“不可持续的高成本”对Grok Bot实施使用限制,而就在不久前,他还称这款产品拥有“我一生中见过的最快增长速度”。增长神话与算力账单正面相撞,暴露出AI聊天机器人免费或低门槛模式背后的经济难题。本文梳理事件始末,并分析大模型限流潮背后的行业逻辑。

    来源 AI 行业观察
  11. OpenAI 发布 LifeVal 基准:从选幼儿园到报税,测试 AI 的“人间烟火”技能

    IT之家 11 月 3 日消息,OpenAI 于 11 月 2 日发布名为 LifeVal 的新基准,用来衡量 AI 模型能否真正帮助普通人完成日常事务,该公司称这一评估旨在让通用 AI 更贴近“对人类最有用的日常帮助”。 在 LifeVal 的任务设计上,OpenAI 首先参考了美国的“美国人时间使用调查”和跨国“多

    来源 AI 行业观察
  12. 奥尔特曼批PC内存浪费引声讨,马斯克补刀

    “IT早报”时间,大家好,现在是 2026 年 11 月 3 日星期一,今天的重要科技资讯有: 1. OpenAI CEO 奥尔特曼称个人电脑浪费内存遭全网声讨,马斯克也来补刀 OpenAI CEO 奥尔特曼称把 DRAM 装在个人电脑中是资源浪费,引发全网不满,马斯克公开发文声讨,称民众理应拥有自己的内存,还直接骂奥

    来源 AI 行业观察
  13. OpenAI整合ChatGPT聊天与Work标签:共用配额池,打造统一AI工作台

    OpenAI宣布将ChatGPT的聊天标签页与Work标签页合并,同时ChatGPT和Codex将共享同一用量配额池。这一调整旨在简化用户体验、降低使用门槛,并强化AI助手在工作场景中的整合能力。从多产品线并进到统一平台生态,OpenAI正试图把分散的功能入口收拢为一个连贯的AI工作台,这也折射出整个AI助手赛道从功能

    来源 AI 科技快讯
  14. MIT CSAIL:0.016%权重微调,Qwen3.5数学成绩涨六倍?

    MIT CSAIL团队发现,GPT-6 Astra能直接阅读并修改其他神经网络的权重。在不重新训练的情况下,仅修改Qwen模型0.016%的参数,就将其数学解题率从7.9%提升至48.1%,甚至能从零编写出超越传统训练的游戏AI。这种被称为“权重空间编程”的技术,可能彻底改变模型优化和自我改进的路径。

    来源 AI 应用前沿
  15. Anthropic还在疯狂抢算力:8954亿美元承诺,连旧煤电厂都不放过

    Anthropic CEO达里奥·阿莫迪。图片经由AI处理文丨苏扬编辑丨徐青阳 AI公司正在变成大型基础设施买家。Anthropic的扩张路径,已经从训练模型、争夺企业客户,延伸到建设数据中心、采购芯片和协调电力资源。为了获得足够的计算能力,这家公司开始直接介入过去主要由云服务商和基础设施运营商承担的工作。美国当地时间

    来源 腾讯网
向下滚动自动加载更多