大语言模型测试
用多个语言模型执行创意写作、内容生成、结构化文本、代码分析和摘要任务,通过变化输入提示与输出回复的长度,模拟不同类型的语言模型使用方式。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
面向个人电脑的大模型与生成式AI性能基准测试
MLPerf Client 由 MLCommons 联合开发,用于评测笔记本、台式机与工作站上大语言模型、生成图像模型和智能体工作负载的运行表现。语言模型测试覆盖创意写作、代码分析、摘要等任务,采用 Llama 3.1 8B Instruct、Phi 4 Mini Instruct 等模型;图像生成测试用 Flux 2 Klein 4B,以每分钟生成图片数为指标。硬件门槛不低,GPU 配置通常需要 8GB 以上显存,纯 GPU 方案建议 48GB 以上内存,部分扩展测试在普通客户端上可能跑不起来。
MLPerf Client 是 MLCommons 旗下 MLPerf Client 工作组联合开发的基准测试,用来评估个人电脑——从笔记本、台式机到工作站——运行大语言模型、生成式图像模型和智能体 AI 工作负载的性能。它通过模拟真实 AI 任务,给出透明、可比的指标,帮助理解系统应对最新生成式 AI 能力的效果。工作组希望这套基准能推动创新与竞争,让 PC 跟上快速演进的 AI 需求。
语言模型测试使用多个模型,覆盖不同长度的输入提示与输出回复,任务是创意写作、内容生成、结构化文本、代码分析、摘要(分中级与大量两档)。所用模型包括 Llama 3.1 8B Instruct、Phi 4 Mini Instruct,以及作为扩展组件的 Phi 4 Reasoning 14B 和 Qwen 3 8B。质量用 MMLU/IFEval 分数衡量。图像生成测试评估 PC 本地运行生成式视觉模型的能力,采用 Flux 2 Klein 4B 作为实验性测试,使用四条不同提示,每条各生成四张图,全部为 1024×1024 分辨率,以每分钟生成图片数为指标。智能体测试则针对软件工程与数据分析任务,衡量端到端耗时,并拆分 LLM 推理与工具执行时间。
普通用户可用它判断手上的机器能跑多强的本地 AI 模型;开发者和采购方可以拿它对比不同显卡与处理器的实际表现;团队在做硬件选型时,也能用它作为参考。
用多个语言模型执行创意写作、内容生成、结构化文本、代码分析和摘要任务,通过变化输入提示与输出回复的长度,模拟不同类型的语言模型使用方式。
评估 PC 本地运行生成式视觉模型的能力,采用 Flux 2 Klein 4B 作为实验性测试,用四条提示各生成四张图,全部为 1024×1024 分辨率,以每分钟生成图片数为指标。
针对软件工程与数据分析场景,衡量 AI 智能体在多步骤工作流中的端到端耗时,并拆分 LLM 推理与工具执行时间,帮助了解多步流程的真实开销。
被标为扩展或实验性的任务与模型不属于基础基准,作为可选附加项提供,可对系统施加不同压力,但未必在所有目标系统上充分优化,运行可能失败。
覆盖 AMD Radeon RX 7000 或 9000 系列、Intel Arc B 系列、Intel Core Ultra 系列 2 及更新处理器、NVIDIA GeForce RTX 2000 系列及更新 GPU,以及 Qualcomm Snapdragon X Elite 和 X2 Elite 平台。
当你想知道一台 PC 能不能本地跑得动大语言模型或图像生成,或需要横向对比不同显卡、处理器的 AI 实际表现时,MLPerf Client 是一套有明确任务、模型与指标的参考标准,结果透明可查。但它的门槛不低:GPU 配置一般要 8GB 以上显存,纯 GPU 方案建议 48GB 以上系统内存,扩展组件对内存要求更高,在普通客户端上可能跑不起来。如果你的机器内存或显存偏低,先别急着跑扩展测试,从基础组件开始更稳妥。
需要对比不同显卡、处理器在本地生成式 AI 上的实际表现,可直接采用其任务与指标做横向评测。
想在个人电脑上跑大语言模型或图像生成,可先跑基础组件确认机器能否满足需求,再决定部署方案。
内存 48GB 以上、显存充足的机器能跑完整测试,包括扩展与实验性组件,得到较全面的性能画像。
显存或系统内存低于基础门槛时,部分测试尤其是扩展组件可能无法运行,需要先核对自己的配置。
测试涉及模型、数据集与环境配置,门槛不低,只是想知道 AI 好不好用的话,投入产出比不高。
它是 MLCommons 下 MLPerf Client 工作组联合开发的基准测试,用于评估个人电脑——从笔记本、台式机到工作站——运行大语言模型、生成式图像模型和智能体 AI 工作负载的性能,通过模拟真实 AI 任务给出透明、可比的指标。
分三大块:语言模型测试,覆盖创意写作、内容生成、结构化文本、代码分析和摘要任务;图像生成测试,用 Flux 2 Klein 4B 生成 1024×1024 图片,以每分钟图片数为指标;智能体 AI 测试,针对软件工程与数据分析任务衡量端到端耗时。
语言模型测试使用 Llama 3.1 8B Instruct、Phi 4 Mini Instruct,以及作为扩展组件的 Phi 4 Reasoning 14B 和 Qwen 3 8B。图像生成测试使用 Flux 2 Klein 4B 作为实验性测试。智能体测试使用 Llama 3.1 8B 和 Qwen 3 8B。
GPU 配置通常需要 8GB 以上显存,扩展提示需 16GB;系统内存方面,NPU 方案需 16GB 以上,混合方案推荐 32GB 以上,纯 GPU 方案建议 48GB 以上。支持的硬件包括 AMD Radeon RX 7000 或 9000 系列、Intel Arc B 系列、NVIDIA RTX 2000 系列及更新 GPU 等。
被标为扩展或实验性的任务与模型不属于基础基准,而是可选附加项,可对系统施加不同压力,但未必在所有目标系统上充分优化。这些工作负载对内存要求较高,可能无法在所有客户端上成功运行。
用四条不同提示,每条生成四张图片,模拟典型真实使用,全部为 1024×1024 分辨率,以每分钟生成图片数作为指标。不同平台可能采用不同后端处理,工作组在开发阶段通过评估视觉质量来保证可比性。
针对软件工程和数据分析两类任务,衡量 AI 智能体在真实场景多步骤工作流中的端到端表现,包括端到端耗时,并给出 LLM 推理与工具执行时间的拆分,便于了解开销分布。