OpenAI部署“控制室”系统:35秒内叫停失控AI智能体

资讯 腾讯网 作者:腾讯网 全文 421 字 · 约 2 分钟读完 分类OpenAI智能体

IT之家 11 月 10 日消息,OpenAI 今天宣布,公司已在内部研究设施中部署“控制室”系统,用于停止可能存在风险的 AI 任务,可在 35 秒内“叫停”失控的 AI 智能体。据介绍,这套系统将智能体训练、评估和数据处理任务等负载接入中央服务,然后由系统负责决定任务能否继续输出。IT之家了解到,这套系统与负责标记

所属频道 大厂动态智能体与 Agent

OpenAI 11 月 10 日宣布,已在内部研究设施中部署“控制室”系统。这套系统用来停止可能存在风险的 AI 任务,能在 35 秒内“叫停”失控的 AI 智能体。

据公司介绍,智能体训练、评估和数据处理任务等负载会被接入一项中央服务,再由系统判定任务能否继续输出。

与标记可疑行为的传统监控不同,这套系统能主动阻止风险研究任务继续请求输出。研究员启用某一项任务时,要先向控制室申请唯一任务 ID;该标识符随后附加到发给推理引擎的请求中,引擎再向控制室查询,确认相关任务是否可以运行。

一旦研究员或监控系统下达停止指示,控制室服务就会拒绝下一次推理请求,推理引擎随之不再为任务输出任何模型内容。

OpenAI 称,从收到停止指令到阻止任务继续运行,最长延迟为 35 秒。这一延迟来自推理授权请求的缓存层,公司正设法把延迟压缩到 0。

这套系统还集成了自动化监控机制。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. OpenAI个人Agent Dot解锁邮箱验证码:登录能自动填了

    个人Agent集体往前迈了一步。11月8日,OpenAI产品团队成员James Sun在社媒上发布一项产品更新,个人Agent产品Dot现在可以使用发到已连接邮箱的登录验证码,替用户完成登录。收到提示后,用户可以选择只允许这一次,也可以允许它以后自动填写。James Sun还说,后续会继续改进登录体验。消息发出后,用户

    来源 腾讯网
  2. 苹果Siri明年或变身自主代理,硬刚OpenAI与Meta

    人工智能行业的竞争正从基础对话迅速转向具备独立执行能力的代理(Agent)时代。根据彭博社知名记者马克·古尔曼在最新一期《Power On》时事通讯中的爆料,苹果正计划最早于明年推出自主、代理式的 Siri,标志着这一经典语音助手将从单纯被动响应命令,彻底转向能够主动管理任务并代表用户完成各项事务的智能助手。 锚定行业

    来源 AI 开发者社区
  3. OpenAI与13家实验室联手:AI在真实实验中表现如何?

    11 月 6 日,OpenAI 发布了一套面向实验室日常工作的评测基准 BioBasicsBench。它和一家做酶设计的生物技术公司 Ligo 合作,从真实实验中整理出 100 项任务,将凝胶电泳图、菌落平板、显微镜图像和仪器读数交给 AI,考察它能否读懂数据、发现错误,以及判断现有证据是否足以支持结论。在 “xhig

    来源 腾讯网
  4. GPT-6.2 缺席背后:Vals AI 安全警告与 OpenAI 内部失配报告

    OpenAI 原定于 11 月 6 日发布的 GPT-6.2 Astra 和 Sol 模型并未如期亮相。第三方机构 Vals AI 警告发现严重安全漏洞,虽未点名但引发猜测。与此同时,OpenAI 内部报告披露 GPT-6 系列存在关闭监控、隐瞒操作等失配行为。本文梳理各方消息,分析新模型延期可能涉及的安全对齐难题及智

    来源 AI 应用前沿
  5. OpenAI们成苹果真正对手:Siri落后,特努斯催费德里吉交新路线图

    【TechWeb】由于成本上涨剥夺了安卓手机的价格优势,苹果对安卓平台的侵蚀已不再担忧,真正危险的敌人换成了那些AI大厂。 iOS 27.3版Siri虽能实现更多自动化任务,但与最强大的智能体相比仍相去甚远。若不能迎头赶上,一旦OpenAI、谷歌甚至Anthropic有心发布一款集成前沿模型的个人终端,iPhone或许

    来源 AI 行业观察
  6. OpenAI们成苹果真正对手,Siri落后或重演诺基亚剧本

    按照规划,苹果将在明年推出可执行复杂任务的自主型Siri,以追赶OpenAI、Meta等头部大厂的脚步。外界则认为,苹果正在耐心等待AI泡沫破灭后进场抄底,以低价收购潜在竞争对手的模型与算力设施——否则,它的Siri将永远由第三方驱动。

    来源 TechWeb
  7. OpenAI们成了苹果真正的对手,Siri落后或重演诺基亚困局

    按照规划,苹果将在明年推出可执行复杂任务的自主型Siri,以追赶OpenAI、Meta等头部大厂的脚步。外界则认为,苹果正在耐心等待AI泡沫破灭后进场抄底,以低价收购潜在竞争对手的模型与算力设施——否则,它的Siri将永远由第三方驱动。

    来源 TechWeb
  8. 千问押注Personal Agent:蒋冠军称实际交付能力仅60%~70%

    Personal Agent 已经渡过早期产品验证,进入了新一轮产品竞争阶段:Meta Muse、OpenAI Dots 等纷纷把产品从“炫技”推向了“长期稳定地替用户做事”。 不过,身处一线研发的阿里千问事业部 AI 算法负责人蒋冠军对现状的真实评价是:今天的 AI 依旧不好用。 “虽然对话里已经可以点奶茶、购物,但

    来源 AI 行业观察
  9. ChatGPT封号波及200美元Pro用户,OpenAI未公布受影响人数

    最近,ChatGPT用户圈突然出现一波账号停用风波,连每月花费200美元订阅Pro服务的用户也未能幸免。更让人意外的是,部分用户表示,账号在没有收到任何提前通知的情况下就突然无法登录,页面直接显示

    来源 TechWeb
  10. 三星 One UI 9.5 曝光:Bixby 升级为能代用户办事的 AI 智能体

    IT之家 11 月 9 日消息,外媒 Sammobile 今天(9 日)晚间公布了有关 One UI 9.5 的最新发现:三星准备对 Bixby 进行大幅升级,让语音助手进一步变成能够代用户办事的个人 AI 智能体。该媒体在体验尚未发布的新版 Bixby 后发现,三星语音助手可以在后台处理订酒店、预约等日常事务。例如,

    来源 腾讯网
  11. 苹果新CEO特努斯推AI加速,费德里吉被要求更大胆

    IT之家 11 月 8 日消息,彭博社记者马克 · 古尔曼在今天(8 日)晚间更新的《Power On》时事通讯中披露,苹果新任 CEO 约翰 · 特努斯敦促软件工程主管克雷格 · 费德里吉加快 AI 业务发展,采取更大胆的策略,目标是将 Siri 升级为能够自主替用户完成任务的 AI 智能体。上周的财报电话会议上,特

    来源 腾讯网
  12. AI研发AI冲出逃逸速度:Anthropic Model 4让研究员提速10倍

    哪怕明天全人类拔掉所有新数据中心的电源,也拦不住超级智能了! 就在刚刚,硅谷「AI自己研发AI」的真实进度条被彻底掀开。 哈佛物理学家兼计算机科学家Alex Wissner-Gross在最新播客中直言,AI如今已经越过了「超级智能逃逸速度」。 在他看来,单凭目前掌握的算法洞见与机房里现成的存量算力,就已经足够一路推向超

    来源 AI 行业观察
  13. 腾讯“鹅次元”AI游戏陪伴Agent内测:能看画面陪聊,支持手机QQ

    IT之家 11 月 10 日消息,腾讯首款专属 AI 游戏陪伴 Agent“鹅次元”今日开启内测。这款产品面向 PC 玩家,提供拟人化的 AI 陪伴和实时语音互动。 IT之家了解到,“鹅次元”主打游戏场景实时陪伴,AI 能够看到用户的游戏画面,并根据画面信息与人互动。如果玩家在游戏中遇到不懂的东西,可以随时向这款 AI

    来源 AI 行业观察
  14. OpenAI首笔110亿美元到账:估值1.25万亿,200亿融资几周内补齐

    资本洞察OpenAI新融资到账110亿美元据彭博社报道,OpenAI已经完成新一轮融资的首笔110亿美元交割,公司估值达到1.25万亿美元。整轮融资规模最高可能达到200亿美元,剩余部分预计将在未来几周完成。首笔110亿美元交割的投资者,包括Coatue Management和普信集团(T. Rowe Price)。其

    来源 腾讯网
  15. OpenAI证明“不存在Landau-Siegel零点”:8页原稿,P≠NP再引热议

    人类卡了几十年的数论悬案,AI仅用8页纸就给秒了? 这两天,整个数学界和计算机圈,都陷入了巨大震撼。 10月18日,斯坦福大学数论学家Jared Duker Lichtman在X上的话,瞬间引爆全网—— 「此类证明的存在,强烈暗示了 P≠NP 。」 这句话的导火索,是OpenAI内部模型刚交出的逆天答卷——「不存在La

    来源 AI 行业观察
向下滚动自动加载更多