128K 上下文
Granite 3.1 的稠密模型、MoE 模型与 Granite Guardian 3.1 护栏模型全部支持 128K token 上下文长度,比 Granite 3.0 明显拉长,适合长文档与多轮工具调用场景。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
IBM 面向企业场景的开源语言模型家族,上下文扩展到 128K token
官网地址 https://www.ibm.com/new/announcements/ibm-granite-3-1-powerful-performance-lo…
IBM Granite 3.1 是 Granite 系列开源语言模型的最新更新,主打企业场景的工具调用、检索增强生成(RAG)与可扩展的智能体工作流。整条语言模型产品线——稠密模型、MoE 模型以及护栏模型——上下文长度统一扩展到 128K token。同批还发布了四种尺寸的检索优化嵌入模型,参数规模覆盖 30M 到 278M,均支持 12 种语言,全部以 Apache 2.0 许可开源。短板在于多模态能力尚未落地,官方将这一部分排到后续版本。
IBM Granite 3.1 是 IBM 对 Granite 系列开源语言模型的又一次更新,定位是「开放、高性能、面向企业优化」,重点覆盖工具调用、检索增强生成(RAG)和可扩展的智能体工作流这几类企业常见任务。
这一版包含多个子系列:稠密模型有 Granite 3.1 8B 与 Granite 3.1 2B,MoE 模型有 Granite 3.1 3B-A800M 与 Granite 3.1 1B-A400M,护栏模型有 Granite Guardian 3.1 8B 与 Granite Guardian 3.1 2B,整条产品线统一提供 128K token 上下文。此外推出四款检索优化的 Granite Embedding 嵌入模型,参数跨度 30M–278M,和生成模型一样支持 12 种语言。
使用者可以按角色选择入口:普通使用者可通过 IBM watsonx.ai 或 Docker、Hugging Face、LM Studio、Ollama、Replicate 等平台伙伴直接调用;开发者可以基于 Apache 2.0 许可自行部署与二次开发,并结合 Docling、Bee 等配套框架搭建 RAG 与智能体流程;企业团队则可参照三星(SDS 平台)与洛克希德·马丁(AI Factory 工具,服务超过 10,000 名开发者与工程师)的集成方式落地。
Granite 3.1 的稠密模型、MoE 模型与 Granite Guardian 3.1 护栏模型全部支持 128K token 上下文长度,比 Granite 3.0 明显拉长,适合长文档与多轮工具调用场景。
Granite 3.1 8B Instruct 相比 Granite 3.0 8B Instruct 有显著性能改善,其在 Hugging Face OpenLLM Leaderboard 各项基准上的平均分,在同权重级别的开源模型中处于最高一档。
全新推出检索优化的 Granite Embedding 嵌入模型,共四种尺寸,参数范围 30M–278M,面向 RAG 检索场景优化,可与生成模型搭配使用。
生成模型与嵌入模型均提供多语言支持,覆盖英语、德语、西班牙语、法语、日语、葡萄牙语、阿拉伯语、捷克语、意大利语、韩语、荷兰语和中文共 12 种语言。
Granite Guardian 3.1 8B 与 2B 新增函数调用幻觉检测能力,面向会发起工具调用的智能体,提升过程的可控制性与可观测性。
Granite 3.1、Granite Guardian 3.1 与 Granite Embedding 全部以 Apache 2.0 许可开源,许可条款宽松,便于企业自行部署与再分发。
模型已在 IBM watsonx.ai 上线,同时可通过 Docker、Hugging Face、LM Studio、Ollama、Replicate 等平台伙伴获取使用。
IBM 的紧凑时序模型 Granite TTM(TinyTimeMixers)通过 watsonx.ai 时序预测 API 与 SDK 的 beta 版本在 watsonx.ai 中提供。
当你要做企业级的检索增强生成、工具调用或智能体工作流,而且希望模型能自己部署、许可没约束时,Granite 3.1 值得认真评估:128K 上下文覆盖长文档,Apache 2.0 让二次开发和分发都没有障碍,12 种语言也够覆盖常见的跨境业务。但如果你现在就需要多模态理解(比如看图、看图表),这一版还没有,官方把多模态能力排在了后续版本;如果你的场景主要靠单一超大模型的通用能力,同权重级别的开源模型里也有其他选择可以直接对比。
需要可自部署、许可宽松的模型来承载内部检索与智能体流程,Apache 2.0 与 128K 上下文正好匹配这类需求。
要同时解决长文档输入与检索召回,Granite 3.1 的生成模型加四款嵌入模型可以在一套体系内配齐。
Granite Guardian 3.1 新增函数调用幻觉检测,适合需要观测和控制工具调用链路的项目。
12 种语言覆盖中、日、韩、阿拉伯语等,跨境或多语种业务可以直接复用同一套模型。
多模态能力尚未落地,官方表示排在后续版本,现在以图像理解为核心需求的选型要等。
| 指标 | 数值 | 数据来源 |
|---|---|---|
| 上下文长度 | 128K token | IBM Granite 3.1 发布说明 |
| 嵌入模型参数范围 | 30M–278M | IBM Granite 3.1 发布说明 |
| 支持语言数 | 12 | IBM Granite 3.1 发布说明 |
| 开源许可 | Apache 2.0 | IBM Granite 3.1 发布说明 |
| Lockheed Martin AI Factory 服务开发者数 | over 10,000 | IBM Granite 3.1 发布说明 |
稠密模型包括 Granite 3.1 8B 与 Granite 3.1 2B,MoE 模型包括 Granite 3.1 3B-A800M 与 Granite 3.1 1B-A400M,护栏模型包括 Granite Guardian 3.1 8B 与 Granite Guardian 3.1 2B。这一整条产品线的上下文长度统一为 128K token。
最直接的是 Granite 3.1 8B Instruct 相对 Granite 3.0 8B Instruct 的性能改善,它在 Hugging Face OpenLLM Leaderboard 各项基准上的平均分进入同权重开源模型的最高一档。此外整条产品线上下文扩展到 128K token,并新增四款 30M–278M 参数、支持 12 种语言的检索优化嵌入模型。
Granite 3.1、Granite Guardian 3.1 以及 Granite Embedding 全部以 Apache 2.0 许可开源。这是宽松、标准的开源许可,企业可以在此基础上自行部署与分发。
生成模型与嵌入模型都支持 12 种语言,分别是英语、德语、西班牙语、法语、日语、葡萄牙语、阿拉伯语、捷克语、意大利语、韩语、荷兰语和中文,覆盖了常见的跨境业务语种。
模型已在 IBM watsonx.ai 上线,也可以通过平台伙伴获取,包括 Docker、Hugging Face、LM Studio、Ollama 和 Replicate。想快速试用可以优先从这些平台的现成入口拉取,不搭本地推理环境。
这一版没有多模态能力。IBM 表示会继续为 Granite 3 系列发布更新模型与功能,其中新多模态能力计划在后续版本推出。当前以图像或图表理解为核心需求的场景需要等后续版本。
Granite Guardian 3.1 8B 与 2B 是护栏模型,这一版新增了函数调用幻觉检测能力。对会发起工具调用的智能体来说,这提供了额外的控制手段和可观测性。
具体定价与免费额度尚未公布。可以确定的是模型以 Apache 2.0 许可开源,自部署不产生授权费用,成本主要来自你自己的算力与运维;托管服务的价格需要另行确认。
IBM Granite 3.2 推出,新模型带来实验性的推理能力与视觉理解,重点在文档理解方向。
整条 Granite 3 语言模型产品线上下文扩展到 128K token,Granite 3.1 8B Instruct 性能明显提升,并新增四款检索优化的嵌入模型与函数调用幻觉检测能力。