Cloudflare Auto Router公测:便宜模型出错,修起来更贵

资讯 AI 行业观察 作者:作者:Steef-Jan Wiggers 全文 1934 字 · 约 5 分钟读完 配图 3 张 分类Cloudflare产品更新

Cloudflare 最近通过 AI Gateway 推出了 Auto Router 公测版。只需将模型设置为 cloudflare/auto,分类器就会为每个请求选择一个模型。公告中最有价值的内容,是一项 Cloudflare 自家路由器反而落败的基准测试。 路由分为两个阶段。AI Gateway 首先构建候选模型池

所属频道 产品更新

Cloudflare 近期借 AI Gateway 上线了 Auto Router 公测版。用户只要把模型设成cloudflare/auto,分类器就会给每个请求挑一个模型。公告里最值得看的,是一项让 Cloudflare 自家路由器反而输掉的基准测试。

路由分两步走。AI Gateway 先搭出候选模型池,把处理不了当前请求格式的模型剔掉,再套上凭证、计费配置、访问控制和支出限制。接着,一个多头分类模型在 Cloudflare 边缘 GPU 上通过 Workers AI 跑起来,给 14 类任务分配概率,并从四个维度按 1~5 级给请求打分:复杂性、歧义性、风险程度、对先前上下文的依赖程度。最后,评分矩阵把这些结果和基准测试数据合到一起,公开公式是:“效用 = 预期质量 - 自适应成本惩罚”。

Cloudflare Auto Router公测:便宜模型出错,修起来更贵(配图 1)

分类只看最近几轮,文本上限 8KiB。之后,它按候选模型在不同任务上的能力打分,也看处理较难任务能带来多少预期收益;任务越难,价格在评分里占的分量越轻。

做智能体工程的 CTO Jacques B 在 Cloudflare 的一篇 LinkedIn 帖子里点出了真正该看的指标:

要是还得有人多花一个小时去修结果,那便宜模型其实没省下多少钱。

Cloudflare 公布的恰好就是这个数字。测试含 97 个任务,每个模型采样三次,并做了 1 万次 Bootstrap 重采样。

Cloudflare Auto Router公测:便宜模型出错,修起来更贵(配图 2)

可靠性提升约 10 个百分点,成本约为原来的三分之一。站哪一边由团队自己定,而多数路由产品压根不给这种选择。

分类机制本身招来了从业者最尖锐的质疑。参与过银行和医疗平台开发的技术负责人 Igor Pyrin 说,风险评分只依赖一份偏重最近几轮的精简上下文:

在一段较长的智能体会话里,用户可能很早就讲过“这是客户退款”,后面只补一句“继续执行”。我会让应用自己维护一个跨轮次的风险标签,用它来判断请求能不能用cloudflare/auto。一句简短的最终指令,不该悄悄把底层操作的风险等级降下来。

真正提交操作的那一轮,往往正好是整段对话里看起来成本最低的一轮。

文档还补了两点。其一,响应会带上cf-aig-routed-model 和 cf-aig-routing-reason,后者可能返回cost_optimal_within_pool 或 pinned_by_turn等值,事后就能审计模型选择。其二,可以通过cf-aig-allowed-models 和 cf-aig-allowed-providers请求头,针对单个请求限制模型池,但目前没法把它存成路由配置文件——这正是 Adam Natad 在发布讨论里提的需求。

信这些数据之前,还有一点要确认:当前默认模型池列了 Claude Opus 5、Sonnet 5 和 Fable 5,以及 GPT-5.6 Luna、Sol、Terra 和 Grok 4.5。表格里作为两项基线的 Opus 5.5 和 GPT-6 Sol,却待在必须靠上述请求头才能用的可选模型列表里。Cloudflare 说模型池“可能会随时间变化”,所以这可能只是配置漂移,不是有意设计。不过,想复现该基准测试的团队还是该确认自己的网关到底选了哪些模型。

会话处理也有成本。没有会话 ID 的话,同一对话里的请求可能被分给不同模型,提示词缓存也就没法复用。同样的原因,Cloudflare 会加一项随上下文长度增长的模型切换惩罚,因为新模型可能要重新生成推理 Token,并按输出价格计费。

Reddit 上,评论者 reachjalil 直接否定了这个前提,认为自动路由器“最终会让你花更多的钱,却得到更低的智能”,还说结果真重要的话,直接用能力更强的模型反倒更便宜。评论者 yangqi 回应说,计量单位该是任务,不是请求。reachjalil 随后回复,点出一个 Cloudflare 自己也承认的问题:分类本身更适合交给大模型做,而且路由权重会过时,“尤其是在模型不断变化的情况下”。文章称,路由权重来自基准测试结果,新模型必须手动加进评分矩阵。

Auto Router 公测期间免费,之后的价格还没公布。眼下不支持 WebSocket,只支持 Chat Completions 和 Responses API。

路线图里还有cloudflare/auto-best。它用同一套分类器和模型池,但不考虑成本取舍,直接挑预期质量最高的模型。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 申通快递携千问办公:AI办公体系落地全国网点

    【TechWeb】11月6日消息,申通快递与千问办公正式达成战略合作。双方将围绕快递核心场景打造 AI 办公体系,以Agent能力支撑申通快递全国网点的增长战略落地,推动AI从总部管理向末端网点规模化输出,加速物流服务智能化升级。申通快递总

    来源 TechWeb
  2. 软银53.75亿美元买ABB机器人业务,中国监管层说不

    【TechWeb】11月6日消息,据外媒报道,ABB集团官网11月5日发布的《ABB机器人业务剥离进展更新》声明称,ABB已获软银告知,中国外商投资安全审查工作机制办公室已禁止软银收购ABB在中国的机器人业务。声明同时表示,ABB与软银正保持密切对话,并以建设性态度推进该交易。据媒体报道,ABB机器人业务在全球工业机器

    来源 腾讯网
  3. 曹操出行接入中国移动12580助理,成首个打车生态伙伴

    此次合作将结合曹操出行的合规运力调度、出行服务保障能力,以及中国移动12580个人智能助理的AI意图识别、语音交互和任务调度能力,为用户提供更加便捷、智能的AI打车体验。此次12580个人智能助理上线是双方合作的首期试点,通过 A2A 协议一次对接灵犀主控,后续曹操出行AI打车服务可进一步上线多个中国移动生态入口,扩大

    来源 TechWeb
  4. 曹操出行接入12580:首个打车生态伙伴落地

    此次合作将结合曹操出行的合规运力调度、出行服务保障能力,以及中国移动12580个人智能助理的AI意图识别、语音交互和任务调度能力,为用户提供更加便捷、智能的AI打车体验。此次12580个人智能助理上线是双方合作的首期试点,通过 A2A 协议一次对接灵犀主控,后续曹操出行AI打车服务可进一步上线多个中国移动生态入口,扩大

    来源 TechWeb
  5. Meta为Muse装上动画脸:视频通话能“见面”,还要做电子宠物

    Meta宣布,美国用户现在可以通过视频通话与旗下AI助手Muse的可定制动画头像实时互动。这标志着Meta的AI代理从纯文本对话迈向拟人化的多模态交互。更值得关注的是,Meta还计划推出一款类似电子宠物Tamagotchi的可穿戴设备,试图把Muse从屏幕带入现实生活。此举被视为社交巨头在AI陪伴赛道与AI硬件浪潮中的

    来源 AI 行业观察
  6. 英伟达抽奖送《霍格沃茨之遗》定制RTX 5090,估值2,599美元

    IT之家 11 月 8 日消息,为庆祝 DLSS 5 于 11 月 5 日登陆《霍格沃茨之遗》,英伟达正在举办抽奖活动,送出一张采用《霍格沃茨之遗》定制主题外观的 GeForce RTX 5090 Founders Edition 显卡。 参与者需要在英伟达 GeForce 官方 X、Instagram、Faceboo

    来源 AI 行业观察
  7. Airbnb官宣2027上半年推AI旅行代理:旅行入口争夺战升级

    Airbnb宣布将于2027年上半年正式推出AI旅行代理,该智能体可帮助旅客规划行程、比较房源选项、管理预订,并在整个入住期间提供实时协助。此举标志着短租巨头正式进军AI驱动的旅行服务赛道,意在将平台从“订房工具”升级为全程陪伴的旅行助手,与OTA及通用AI助手展开正面竞争。

    来源 AI 行业观察
  8. Claude新增个人理财:可绑卡查账,只读不碰钱

    IT之家 11 月 6 日消息,当地时间 11 月 5 日,Anthropic 宣布为 Claude 加入个人理财功能,本周开启灰度测试,面向美国地区的 Pro、Max 以及 Ultra 订阅用户开放。据官方介绍,想要理清自己的财务状况,用户再也不用挨个打开银行 App,自己动手算账了。借助 Claude 个人财务功能

    来源 腾讯网
  9. Anthropic上线Claude个人理财:美国Pro/Max/Ultra率先灰度

    当地时间11月5日,人工智能企业Anthropic宣布正式为Claude推出全新的个人理财功能(Personal Finance),并于本周率先开启灰度测试,面向美国地区的 Pro、Max 以及 Ultra 订阅用户开放。这一新功能的上线,标志着大模型正在从单纯的办公与创作助手,逐步深入渗透至用户的日常金融与生活管理场

    来源 AI 开发者社区
  10. 腾讯云ADP升级:企业级Agent如何对经营结果负责

    当 AI 从个人办公助手走向企业核心业务,单纯的工具搭建已无法满足需求。腾讯云 ADP 通过全生命周期升级与 FDE 交付方法论,解决跨系统打通、权限治理及规模化落地难题,让 Service Agent 真正嵌入业务流程,对华润信托、伊利等企业的实际经营指标负责。

    来源 AI 应用前沿
  11. 苏杰离职火山引擎汽车业务:已转个人贡献者,产品上线不受影响

    11月6日消息,近日,火山引擎汽车业务 研发负责人苏杰离职的消息引发外界关注。界面新闻援引接近火山引擎的人士透露,苏杰离职前数月已转为个人贡献者,不再带团队,也并非相关业务研发负责人。截至目前,其离职去向仍不清楚,但该岗位调整及人员变动不会影响火山引擎汽车业务相关产品的正常上线。这两款车型的技术方案均被指由苏杰确定。

    来源 TechWeb
  12. 苏杰离开火山引擎汽车业务,豆包座舱交付不受影响

    11月6日消息,近日,火山引擎汽车业务 研发负责人苏杰离职的消息引发外界关注。界面新闻援引接近火山引擎的人士透露,苏杰离职前数月已转为个人贡献者,不再带团队,也并非相关业务研发负责人。截至目前,其离职去向仍不清楚,但该岗位调整及人员变动不会影响火山引擎汽车业务相关产品的正常上线。这两款车型的技术方案均被指由苏杰确定。

    来源 TechWeb
  13. WhatsApp 测试 AI 扩图:Meta AI 接入 iOS 版编辑器

    近日,WhatsApp 正式面向部分 iOS 测试版用户推出了由 Meta AI 驱动的全新照片扩展工具。该功能深度整合在应用内的绘图编辑器中,旨在通过生成式 AI 技术为移动端图像处理带来更多可能性。 在此次更新中,拥有 Apple Intelligence 功能的 iPhone 用户可以通过 WhatsApp 的全

    来源 AI 开发者社区
  14. 微信鸿蒙版8.0.23.36邀测:公众号贴图长按可问小微

    IT之家 11 月 7 日消息,据用户反馈,微信鸿蒙版 App 今晚在华为应用市场(App Gallery)发布了 8.0.23.36 (8394532) 版本邀测升级(需收到短信通知后点击链接跳转安装),测试时间为 2026/11/7-2026/12/7。 和往常一样,本次更新的说明依旧为“修复了一些已知问题”。据博

    来源 AI 行业观察
  15. 谷歌Omni 1.2 Flash上线:视频时长增至15秒,API降价约30%

    人工智能视频生成与编辑领域迎来重要更新。Google DeepMind 正式发布了全新的多模态视频生成模型——Gemini Omni1.2Flash。该模型在生成时长、画面一致性、多轮对话修改以及 API 价格上均带来了全方位的重大升级。 核心性能升级:时长翻倍、一致性优化与多轮对话编辑 在核心功能方面,Gemini

    来源 AI 开发者社区
  16. Meta上线Spaces:Muse智能体新增协作空间

    Meta旗下Muse智能体再添新功能Spaces,旨在提供与AI助手协作的全新交互方式。本文基于TechCrunch报道,梳理Spaces的定位、Muse智能体的演进脉络,并分析AI代理协作空间对生产力工具市场的潜在影响。

    来源 AI 科技快讯
  17. 荣耀笔记本11月升级:H9/H7及多款2026系列在列

    IT之家 11 月 6 日消息,荣耀产品维护与升级 @荣耀小芳哥 今日公布了荣耀笔记本电脑 11 月升级内容,本月 PC 围绕 YOYO Claw 和 Magic 视界做体验优化,预计 11 月上旬开始逐步推送。 YOYO Claw 优化文档操作类场景,提供全面的文档编辑能力 优化视频创作 Bot 操作,提供文生图、文

    来源 AI 行业观察
  18. Meta撤回页面内容AI训练条款:默认授权争议收场

    面对外界“你们是不是觉得用户读不懂条款”的尖锐质疑,Meta撤回了原定更新的商业条款——该条款原本要求Facebook页面所有者默认同意其关联内容被用于AI训练。这场短暂的博弈,再次把平台协议与数据授权之间的灰色地带推到台前。

    来源 AI 科技快讯
  19. Airbnb:2027上半年上线AI旅行代理,全程参与行程与预订

    Airbnb宣布将于2027年上半年正式推出AI旅行代理,该智能体可帮助旅客规划行程、比较房源选项、管理预订,并在整个入住期间提供实时协助。此举标志着短租巨头正式进军AI驱动的旅行服务赛道,意在将平台从“订房工具”升级为全程陪伴的旅行助手,与OTA及通用AI助手展开正面竞争。

    来源 AI 科技快讯
  20. 基元律动NeoHorse-1.5内测:1250亿参数RSI智能体模型

    智东西作者 | 孙小雯编辑 | 程茜智东西11月5日消息,今日,北京大模型创企基元律动(TokenRhythm)发布面向智能体任务的大模型NeoHorse-1.5-Flash Preview,并开放内测。据基元律动透露,该模型基于Qwen3.8-Flash进行递归自我改进(RSI)迭代,主模型参数为1250亿,激活参数

    来源 腾讯网
  21. 亚马逊上线短信版Alexa购物:美国受邀用户可发消息下单

    【环球网科技综合报道】11月6日,据外媒TechCrunch消息,亚马逊正式推出文本对话模式的Alexa购物功能,美国部分受邀用户可直接通过短信和Alexa交互完成采购,该功能将在未来数周向更多美国用户开放。就在今年9月,亚马逊封禁了Meta旗下AI购物智能体Muse,禁止第三方AI抓取平台商品信息、代消费者下单。时隔

    来源 腾讯网
向下滚动自动加载更多