NaiveAI开源模型Naive-N0.5-Flash,获Latent Space首期实测

资讯 腾讯网 作者:腾讯网 全文 4459 字 · 约 12 分钟读完 配图 2 张 分类OpenRouterDeepSeekGLM开源模型深度求索开源

梦瑶 发自 凹非寺量子位 | 公众号 QbitAI国产大模型,又杀出一匹黑马!而且这回,还是被硅谷超火的硬核AI技术媒体Latent Space亲自实测出来的。就在11月10日,Latent Space推出全新模型测评栏目,专门做「不带立场」的新模型实测。而栏目首期,其就把目光投向了中国公司NaiveAI的开源模型Na

所属频道 开源生态

梦瑶 发自 凹非寺

量子位 | 公众号 QbitAI

国产大模型阵营里,又冒出一匹黑马。

这一回,它是由硅谷人气颇高的硬核AI技术媒体Latent Space亲手实测出来的。

11月10日,Latent Space上线了一个全新的模型测评栏目,主打「不带立场」的新模型实测。

栏目首期的主角,就是中国公司NaiveAI旗下开源模型Naive-N0.5-Flash。

对标的选手,则是OpenRouter上最热门的两款Flash模型:DeepSeek V4.1 Flash 1017和GLM 5.3 Flash。

被拉来和两个头部模型同台较量的Naive-N0.5-Flash,交出的成绩单还挺有竞争力——

  • 综合能力上,它夹在DeepSeek V4.1 Flash与GLM 5.3 Flash之间,稳在国产主流模型第一梯队。

  • 编程能力整体同样处于两者之间,单项评测还实现了反超;3D太阳系应用表现最好,3D生长树与DeepSeek并列。

  • 推理速度方面,极速模式下单秒峰值冲到2100 Token/s,思考阶段984 Token/s、作答阶段1816 Token/s,中位响应时间只有3.1秒,成绩相当亮眼。

提到NaiveAI,其创始人很多人都熟悉——代季峰。

这个模型的出身也颇为特别:架构、训练系统、推理优化,全程都有AI参与研发。

看得出来,NaiveAI这匹新锐黑马,已经在一众头部选手中站住了位置。

Latent Space亲测:中国大模型黑马杀进头部梯队

先说清楚,这次测评为什么值得一看。

在海外AI工程师圈子里,Latent Space这个名字听说过的人不少。

它是一家盯着AI工程领域的独立技术媒体,长期跟大模型、AI Agent和AI基础设施这些方向。

谷歌传奇工程师Jeff Dean等业界重量级人物,也曾受邀做客,聊大模型架构与工程优化等话题。

而且,Latent Space的内容一向以专业、硬核、贴近「真实工程实践」著称——

AI工程实践、大模型底层架构、Agent如何进入真实生产环境,它关心的都是开发者手头正在解决的问题。

换句话说,这家媒体的测评,直接面对的就是那群真会把模型拿去写代码、做产品的人。

作为Latent Space全新测评栏目的首期主角,中国公司NaiveAI的开源模型Naive-N0.5-Flash本身也值得一说。

技术路线上,NaiveAI在推理效率上下了不少功夫——

一边让AI帮着调优自研的NaiveRT系统,把生成速度最高推到2000 Token/s。

另一边用上稀疏注意力等办法,在撑起百万Token上下文的同时,尽量把计算开销压下去。

从产品定位看,NaiveAI盯准的正是眼下开发者最在意的两件事:

一是复杂编程任务能不能做得好,二是高频调用时推理够不够快。

不过这次测评真正有分量的地方,还在Latent Space挑的参照对象。

它直接把DeepSeek V4.1 Flash 1017和GLM 5.3 Flash拉了出来,这两款在OpenRouter上都很受欢迎。

这么一来较量就有看头了:NaiveAI面对的是两个已经在真实开发者市场跑出规模的对手。

那问题就来了,这模型究竟能打到什么程度?

Latent Space先把三款模型的「公开」评测成绩摆到了一起。

综合看下来,Naive-N0.5-Flash处在DeepSeek V4.1 Flash(1017)与GLM 5.3 Flash之间,已经挤进国产主流模型的头部竞争区间。

编程基准测试NL2Repo-Bench上,它更是直接超过了DeepSeek和GLM——

Naive-N0.5-Flash拿到71.9分,比DeepSeek和GLM分别高出3.7分、15.6分。

这项测试考的是模型能不能按自然语言需求搭出完整代码仓库,比生成单个函数更贴近真实的软件开发任务。

也就是说,在完整项目生成这类任务上,Naive-N0.5-Flash的公开评测成绩已经和两款头部Flash模型不相上下。

编程硬刚DeepSeek,速度冲到2100 Token/s

公开跑分当然只是一面,模型到底行不行,还得看实测。

Latent Space这次最先盯上的,就是Naive-N0.5-Flash最擅长的「速度表现」。

官方数据是:标准模式下单用户输出速度约50 Token/s,切到极速模式最高能到2000 Token/s。

结果Latent Space测出来的数字,比官方给的还要猛。

实测里,Latent Space挑了30道题,覆盖数学、科学知识和高难度推理三个层级。

三个模型回答难度相同的问题,同时测Token生成速度、输出长度和整次请求的耗时。

结果Naive-N0.5-Flash把速度优势直接打了出来——

单秒峰值约2100 Token/s,思考阶段约984 Token/s,正式作答时达到1816 Token/s。

响应时间更有体感:开启思考模式后,Naive-N0.5-Flash的中位响应时间只有3.1秒,DeepSeek是10.1秒。

也就是说,同一次请求,Naive-N0.5-Flash花的时间比DeepSeek少了大约69%,速度快了约3.3倍。

把这个结果放进真实的开发环境里看,分量会更清楚。

AI编程、Agent工作流这类场景,通常要一轮接一轮地调模型,中间穿插代码生成、调试、工具执行和结果回传。

一次请求省下几秒,调用次数一多就会叠加起来,最终可能变成更短的任务周期、更高的迭代效率。

但光快不够,「编程能力」还得在实战里站得住。

为此,Latent Space给三款模型喂了同样的提示词,让它们在不同思考模式下做三组网页应用开发任务——

内容涉及3D场景搭建、程序化建模、物理效果模拟和图形渲染,对代码生成和复杂功能落地都有不低的要求。

第一局:从零手搓一个完整的3D太阳系。

模型得独立做出太阳和各大行星,支持镜头旋转、行星公转、速度调节,星球表面纹理也要用代码写出来。

结果是,Naive-N0.5-Flash开启思考模式后,直接拿了全场最佳。

太阳表面的黑子看得清清楚楚,地球背光那面还出现了夜间城市灯光,整个场景的细节和完整度都比较突出。

对面站着DeepSeek、GLM这两位头部选手,它在场景完整度、视觉细节和交互实现上照样打出了自己的优势:

△左:Naive-N0.5-Flash (thinking) 右:DeepSeek V4.1 Flash 1017(high)

第二项任务,是生成一棵能「实时交互」的3D生长树。

树枝怎么分叉、树叶怎么分布、树皮纹理、草地阴影,再到风力作用下的动态变化,全都要模型用代码实现。

这一轮,Naive-N0.5-Flash (thinking)和DeepSeek V4.1 Flash 1017(high)表现接近,两者开启思考模式后都交出了质量较高的作品。

和太阳系那道题比,这一题更考验模型处理动态场景的本事。

成千上万片树叶要分布得合理,树枝在风里要摆得自然,同时实时渲染性能也不能掉。

Naive-N0.5-Flash能跟DeepSeek保持相近的完成质量,说明它在场景建模、动态效果和交互逻辑这类更复杂的编程任务上,实现能力已经相当扎实:

△左:Naive-N0.5-Flash (thinking) 右:DeepSeek V4.1 Flash 1017(high)

最后一项任务,把考验推到了「图形编程」上。

Latent Space要求三款模型把经典图形学教程《Ray Tracing in One Weekend》做成浏览器里能实时跑的光线追踪应用。

模型要模拟光线在玻璃、金属等不同材质上的反射与折射,并把场景渲染出来。

这类任务对数学计算、图形算法和代码执行效率要求都高,尤其需要模型吃透不同材质的光学特性,再把它变成能跑起来的渲染程序。

三款模型最后都交出了能跑起来的应用,NaiveAI的核心功能也顺利落地。

三组测试当然说明不了模型的全部本事,但至少给了一个直观信号:碰上不同类型的任务,Naive-N0.5-Flash这款新锐模型已经能和DeepSeek等头部模型同台过招。

中国大模型出海,正走进群雄并起的阶段。

这回NaiveAI被硅谷知名AI媒体Latent Space盯上,背后其实藏着一个更值得琢磨的行业变化——中国大模型正在海外技术圈加速冒头。往前数几年,海外开发者聊起开源模型和API调用,头一个想到的还是Llama、Mistral这些欧美选手。

可这两年,全球大模型的竞争格局已经明显变了样。DeepSeek靠高性能、低成本在全球打出名气,Qwen不断把开源生态做大,GLM、Kimi、MiniMax等中国模型也接连进入海外开发者的视线,在编程、推理和Agent这些方向上各自攒下了关注。

模型榜单上有它们,开源社区里有它们,实际的API调用中也越来越多地出现中国模型的身影。海外技术圈对中国大模型的印象,眼下正从少数几个明星产品,扩展成一支不断壮大的中国模型生态队伍。

△AI生成

更值得留意的是,中国大模型的出海竞争正在形成新的梯队:头部厂商继续领跑,新锐力量接连突围。NaiveAI就是个挺有代表性的例子。

行业里越来越多人感慨头部牌桌可能已经坐满、新玩家想挤进去越来越难,可就在这样的环境里,一家成立不到一年的公司,还是靠高速推理、底层优化和AI参与模型研发这些前沿技术,拿出了能和头部模型同台较量的成果。

另外,NaiveAI打成立之初就选定了「AI驱动AI研发」的技术路线:让AI参与代码编写、实验运行和持续迭代,人类研究员负责把握方向与关键决策,摸索一条用AI提升模型研发效率的新路子。为此,公司搭起了大规模AI研发基础设施,每周支持近千万次沙箱运行,峰值并发达10万个。

这个思路也引起了Latent Space作者Gabriele Beltramo的注意。在他看来,NaiveAI正在探索一条颇具潜力的路径:让AI优化自己的推理CUDA内核,并寻找更适合大规模强化学习的模型架构。

从头部模型的单点突破,走到头部领跑、黑马接力的梯队竞争,中国大模型如今正在形成一个更有厚度、也更能持续创新的产业生态。

而NaiveAI这次在海外实测中的表现,恰好给这一趋势添了一个鲜活的注脚——

头部格局虽然越来越明朗,但中国黑马仍在陆续进场。它们带着新技术、新思路,在成熟选手中间跑出了自己的位置。

参考链接:

[1]https://latent.space/p/naiveai/

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 对话前Hugging Face王铁震:当开源模型走入“至暗时刻”,别再卷参数了,赶紧赚钱吧

    过去三年,国内几乎每一次现象级的开源大模型出海,背后都有王铁震的身影。2022 年底,曾参与把 TensorFlow 塞进手机和单片机的他离开 Google,加入 Hugging Face 负责亚太生态。在那个“开源就是把模型权重扔进网盘”的草莽年代,他帮国内团队做 Day 0 上架、定开源策略、在海外造势,亲历了零一

    来源 腾讯网
  2. 豆包工作开放Kimi、GLM等第三方模型,办公Agent竞争加剧

    字节跳动旗下的豆包工作,开始让用户使用更多竞争对手的大模型。11月12日,豆包工作宣布更新模型阵容,在原有豆包2.1 Lite和Pro两款自研模型之外,正式接入Kimi K3.1 Pro、GLM 5.3、DeepSeek V4.1 Flash等第三方模型。这次更新还伴随着一轮价格调整。豆包工作将在模型选择页面标注不同模

    来源 腾讯网
  3. 文心5.5 Flash Preview八项基准夺两冠,百度一周三连发

    11月11日,沉寂许久的百度文心突然晒出一张成绩单。模型是ERNIE 5.5 Flash Preview,一共八项基准测试,对照组是Claude Opus 5.5、GPT-6.1 Sol、腾讯的Hy4、DeepSeek V4.1 Flash和智谱的GLM-5.3系列。八项里,它拿了两项第一。这是文心一周之内的第三个动作

    来源 腾讯网
  4. 豆包工作上线Kimi、GLM、DeepSeek模型,按倍率扣额度

    11月12日,豆包工作更新模型阵容,在豆包2.1 Lite和豆包2.1 Pro之外新增Kimi K3.1 Pro、GLM 5.3、DeepSeek V4.1 Flash等第三方模型。同时引入模型额度消耗倍率机制,倍率越低,执行同类任务消耗的额度越少,用户可按任务类型选择模型。

    来源 凤凰科技
  5. 豆包工作上线Kimi 3.1 Pro等模型:限时额度优惠怎么用?

    为满足用户根据不同任务自主选择模型的需求,11月12日,豆包工作正式接入 Kimi 3.1 Pro、GLM 5.3、DeepSeek V4.1 Flash 等多款第三方模型,并推出限时特惠计划。在简单小额任务免费的基础上,豆包工作将推出全新限时优惠活动。此外,豆包工作已针对豆包 2.1 Lite和Deepseek V4

    来源 TechWeb
  6. 豆包工作接入Kimi 3.1 Pro等模型:新增额度倍率标注,推出限时优惠

    为满足用户根据不同任务自主选择模型的需求,11月12日,豆包工作正式接入 Kimi 3.1 Pro、GLM 5.3、DeepSeek V4.1 Flash 等多款第三方模型,并推出限时特惠计划。在简单小额任务免费的基础上,豆包工作将推出全新限时优惠活动。此外,豆包工作已针对豆包 2.1 Lite和Deepseek V4

    来源 TechWeb
  7. 豆包工作接入Kimi 3.1 Pro等模型:限时额度优惠上线

    为满足用户根据不同任务自主选择模型的需求,11月12日,豆包工作正式接入 Kimi 3.1 Pro、GLM 5.3、DeepSeek V4.1 Flash 等多款第三方模型,并推出限时特惠计划。用户可根据实际工作需要,选择相应模型完成任务。 此前,豆包工作已向企业客户开放了第三方模型,为了让用户更清晰地了解不同模型的使

    来源 AI 行业观察
  8. 豆包工作开放Kimi、GLM、DeepSeek接入:限时倍率优惠上线

    豆包工作正式向个人用户开放第三方大模型选择,包括Kimi 3.1 Pro、GLM 5.3等。平台更新了额度消耗倍率显示,帮助用户直观对比成本。同时推出限时特惠,针对豆包2.1 Lite和DeepSeek V4.1 Flash下调消耗倍率,并在特定时段提供额外优惠,旨在让用户根据任务难度灵活平衡效果与成本。

    来源 AI 应用前沿
  9. VeriSpoof:音频取证为何需要统一大模型?

    墨尔本大学推出VeriSpoof,一个2.85B参数的音频大模型。它不依赖专用分类头,而是通过问答形式完成真伪检测、系统溯源和同源验证。在Speech-DF-Arena基准测试中,其合并EER为2.14%,位居开源模型第一。该模型支持可核实的推理输出,能定位伪造片段并解释判断依据,适合媒体审核、金融反欺诈及司法取证等场

    来源 AI 应用前沿
  10. SOV-Transcribe-1:4亿参数如何破解真实场景语音识别难题?

    Salesforce发布了SOV-Transcribe-1,这是一个拥有40亿活跃参数的开源语音识别模型。它在英文转录准确率、关键实体识别以及口音适应性上表现突出,尤其在嘈杂环境和特定领域术语识别上优于同类开源模型。该模型支持通过指令调整输出风格,并允许开发者通过上下文偏置优化专有名词识别,适合构建企业级语音应用。

    来源 AI 应用前沿
  11. MiniMax开源H3-Image图像模型:10秒出4K图,支持16图融合

    智东西11月11日报道,昨天深夜,MiniMax正式发布新一代图像生成模型H3-Image,并同步开放模型权重。 根据不少网友的实测反馈,H3-Image的水准已经能和全球顶级的图像生成模型掰手腕,在开源图像模型中达到SOTA水平。速度方面,H3-Image高速版可以在10秒左右生成一张4096×4096像素(16MP

    来源 AI 行业观察
  12. MiniMax H3 Image开源:原生4K直出,10秒生成

    编辑|泽南、杨文「GPT is cooked.」这两天,这句话在 AI 社区里反复出现。让人坐不住的是 MiniMax 刚发布的图像模型 MiniMax H3 Image。这是一个原生 4K 直出、10 秒级生成、支持 16 张参考图的模型,本周二刚刚开源,刷新了开源图像模型的 SOTA。从大家的第一波反应看,这个说法

    来源 腾讯网
  13. OpenRouter并入Stripe:400款模型、790万亿Token的去向

    感谢IT之家网友 lous、咩咩洋 的线索投递! Stripe 昨日(11 月 11 日)发布博文,宣布全球最大 AI 模型 API 聚合平台 OpenRouter 已正式并入旗下,并共同携手帮助企业探索新的商业模式,并优化词元(Token)路由和用量。 Stripe 对 AI 领域的布局,正在进一步延伸至企业如何选择

    来源 AI 开发者社区
  14. Hugging Face CEO 哀叹黄仁勋从英伟达离职:承诺继续力挺开源 AI

    IT之家 11 月 13 日消息,黄仁勋昨日(11 月 12 日)辞去英伟达总裁、首席执行官及董事职务,即刻生效。Hugging Face 首席执行官克莱芒 · 德朗格(Clement Delangue)随即在领英发文,称这是“令人无比难过的一天”,并表示将继续更坚定地推动开源人工智能。IT之家昨日报道,联合创始人黄仁

    来源 腾讯网
  15. 豆包工作开放第三方模型接入:Kimi K3.1Pro等可选,按倍率计费

    豆包工作11月12日更新,接入多款第三方大模型并推出限时特惠计划。用户在豆包2.1Lite与Pro两款自研模型之外,新增可选Kimi K3.1Pro、GLM5.3、DeepSeek V4.1Flash等模型,选择范围由自研体系扩至外部主流阵容。 因模型使用成本不同,豆包工作在模型选择页面标注各模型的额度消耗倍率,系数越

    来源 AI 开发者社区
  16. 黄仁勋卸任英伟达CEO,Hugging Face掌门人喊话守住开源

    英伟达 11 月 12 日宣布掌门人黄仁勋即刻卸任总裁、CEO 与董事三职。消息刚落,Hugging Face 首席执行官克莱芒·德朗格就在领英写下长文。他连用两个"糟透了"表达错愕:"我真希望这一切从未发生,这真是令人无比难过的一天",并承诺公司将"比以往更努力"地守住开源人工智能,强调此刻"不能放慢脚步",开源阵营

    来源 AI 开发者社区
  17. 黄仁勋辞任英伟达CEO:委员会拍板或拖慢决策,美国开源AI恐成输家

    SemiAnalysis创始人Dylan Patel指出,失去“创始人模式”的英伟达恐陷入“委员会决策”的低效泥潭,极难维系对供应链的低价绝对掌控。受此波及,高度依赖英伟达资金与算力的美国开源生态将成最大输家,而算力结构更多元的闭源巨头Anthropic反成受益者。此外市场需高度警惕监管扩圈,算力云租赁及“AI合成数据

    来源 华尔街见闻
  18. Praxis-1 机器人模型:270亿参数,速度超GPT-6 Astra 15.6倍

    IT之家 11 月 12 日消息,美国视频 AI 公司 Runway 昨日(11 月 11 日)宣布推出机器人模型 Praxis-1,将视频预训练中学到的知识用于真实机器人控制。该模型开放权重,采用 Apache 2.0 许可证,开发者可在自有硬件上运行和微调。Praxis-1 模型的设计思路,是让 AI 先从普通视频

    来源 腾讯网
向下滚动自动加载更多