端到端追踪
Trace everything from the team who founded OpenInference,可查看每一次请求内部的 trace 与 span,回答「我的 agent 到底做了什么」,并支持搜索、过滤和下钻排查。
Ax 文档 ↗拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
Arize 是一个面向 AI 应用和 Agent 的可观测性与评估平台,由创立 OpenInference 标准的团队打造,用于从开发到生产的全流程调试、评估与改进。每年运行 1 Billion evals,每月 5 Million downloads,并支持 40+ 模型,框架与 AI 工具集成。平台提供信号自动发现问题、LLM-as-a-Judge 等评估方式,并内置 AI 工程 Agent Alyx。短板也很明显:AX Pro 起步 $50 per month,仅含 50k spans per month 与 30 days 保留,重度使用需走 Custom 企业方案,对小团队和个人开发者门槛不低。
Arize 是一个面向 AI 应用与 Agent 的可观测性和评估平台,定位为「从开发到生产」的全流程工具。它由创立 OpenInference 开放标准的团队打造,主要用户是构建 AI 产品、Agent、RAG 系统和 copilot 的工程团队。
平台的核心能力包括:追踪每一次请求内部的 trace 与 span,通过 Signal 自动从生产 trace 中发现问题、用 LLM-as-a-Judge、agent-as-a-judge 或代码评估器运行评估,并用 experiments 把 prompt,模型或 Agent 的改动变成可控对比。它还提供 AI 工程 Agent Alyx,可以运行 evals、调试问题并改进 Agent;数据层 ADB 以开放格式存储并连接 BigQuery、Databricks 或 Snowflake。
对于不同用户:普通开发者可以从 AX Free 起步,无需信用卡;AI-native 团队适合 AX Pro,$50 per month 含 50k spans per month 与 30 days 保留;有规模化 AI 用例的团队则走 AX Enterprise 的 Custom 方案,可选 SaaS 或 Self-Hosted。平台也提供开源工具 Phoenix,支持本地托管。
Trace everything from the team who founded OpenInference,可查看每一次请求内部的 trace 与 span,回答「我的 agent 到底做了什么」,并支持搜索、过滤和下钻排查。
Ax 文档 ↗开启 Signal 后可自动从生产 traces 中发现问题,按 scheduling 和配置运行,并给出 root causes 与 review-ready fixes,帮助团队在 trace 数量超出人工审查能力时定位重点。
Signal 参考 ↗支持 span,session 级别的在线与离线评估,评估器包括 LLM-as-a-Judge,agent-as-a-judge 或代码评估器。
评估文档 ↗Alyx 定位为 AI engineering agent,类似 Cursor 或 Claude Code 但面向 AI 工程:可以运行 evals、调试问题并改进 agent,用户给它一个问题,它去修复。
官方说明 ↗用 experiments 把 prompt、模型或 agent 的改动变成受控对比,在部署到生产前测试 prompts 和 harnesses 是否真的让结果变好,并验证改进是否可复现。
Improve ↗ADB 是面向 GenAI traces 的 datastore,以开放格式存储,可通过 DataFabric 原生连接 BigQuery、Databricks 或 Snowflake,避免专有 trace 格式锁定。
官方说明 ↗基于 OpenInference 和 OpenTelemetry 标准,instrument once,无专有 trace 格式;可与 40+ models、frameworks 和 AI tools 集成,覆盖 Google Cloud、AWS、Azure 和 self-hosted 环境。
官方说明 ↗HIPAA 等认证,并支持灵活部署方式;官方说明数据保持归用户所有,细节可查阅 Arize Trust Center。
Trust Center ↗需要从开发到生产持续调试、评估和改进 agent 与 RAG 系统的团队,可用 trace、Signal 和评估器形成闭环。
AX Pro 为 $50 per month,含 50k spans per month、10 GB 摄入和 30 days 保留,适合用量可控的小型团队试水。
AX Free 无需信用卡,但 Signal 仅 10 issues per month、Trace spans 25k spans per month、保留 15 days,超出即受限。
AX Enterprise 为 Custom,支持 SaaS 或 Self-Hosted,并有 startup pricing available,适合有合规与部署要求的组织。
如果需求只是普通知识文档管理,没有 trace、eval 和 agent 调试场景,Arize 的能力用不上。
| 方案 | 价格 | 包含内容 | 说明 |
|---|---|---|---|
| AX Free | Free | Signal 10 issues per month、Trace spans 25k spans per month、Ingestion volume 1 GB per month、Retention 15 days | For builders,No credit card required,SaaS,Users Unlimited,Evals Unlimited |
| AX Pro | $50 per month | Signal 25 issues per month、Trace spans 50k spans per month、Ingestion volume 10 GB per month、Retention 30 days | For AI-native teams,SaaS,Users Unlimited,Evals Unlimited |
| AX Enterprise | Custom | Signal Unlimited、Trace spans Custom、Ingestion Volume Custom、Retention Custom | For teams with scaled AI use cases,SaaS or Self-Hosted,Users Unlimited,Evals Unlimited,Startup pricing available |
以上为公开费率整理,厂商保留调价权利,实际以官方页面为准。
| 指标 | 数值 | 数据来源 |
|---|---|---|
| spans processed | 1 Trillion | Arize 官网首页 |
| evals per year | 1 Billion | Arize 官网首页 |
| downloads per month | 5 Million | Arize 官网首页 |
| AX Free Trace spans | 25k spans per month | Arize 定价页 |
| AX Pro Trace spans | 50k spans per month | Arize 定价页 |
| 集成的模型、框架与工具 | 40+ | Arize 官网首页 |
有免费档。AX Free 免费且 No credit card required,含 Signal 10 issues per month、Trace spans 25k spans per month、Ingestion volume 1 GB per month、Retention 15 days。AX Pro 为 $50 per month,含 25 issues per month、50k spans per month、10 GB per month 和 30 days 保留。AX Enterprise 为 Custom,并有 startup pricing available。
覆盖 Observe,Improve 三个阶段:用 Signal 自动从生产 traces 发现问题,用 LLM-as-a-Judge,agent-as-a-judge 或代码评估器做评估,再用 experiments 把改动变成受控对比。此外还有 AI 工程 Agent Alyx 和 GenAI traces 数据存储 ADB。
Phoenix 是同一团队提供的开源评估与可观测工具,支持 Host locally,可追踪每次 LLM 调用、运行 evals 并保留数据控制权。Arize AX 则是托管平台,SaaS 是其默认部署方式,Self-Hosted 仅 AX Enterprise 提供。 Phoenix 是 the leading open-source eval and observability tool。
官网未给出按地区限制访问的说明。可确认的是部署方式:AX Free 与 AX Pro 为 SaaS,AX Enterprise 可选 SaaS 或 Self-Hosted;平台支持 Google Cloud、AWS、Azure 和 self-hosted 环境,并持有 SOC 2 Type II、ISO 27001、PCI DSS、HIPAA、GDPR 等认证,数据保持归用户所有。
frameworks 和 AI tools,包括 OpenAI,OpenAI Agents SDK、DSPy 等。基于 OpenInference 和 OpenTelemetry,instrument once,无需专有 trace 格式。
官方建议先把 agent 或应用连接到 Arize 并发送第一条 trace。可在终端执行 npx 安装,也可从产品内 Start in the product,或先用 AX Free。文档建议先用 AI coding agent 装 skills 或 MCP servers 完成 instrument,再开启 Signal 读取第一个 issue,随后创建 evaluators。
HIPAA 认证,并称 Your data stays yours. And stays secure。平台支持灵活部署,ADB 以开放格式存储并可通过 DataFabric 连接 BigQuery、Databricks 或 Snowflake,更多细节见 Arize Trust Center。
| 工具 | 编辑评分 | 价格 | 核心功能 | 平台 |
|---|---|---|---|---|
| arize.com本工具 | 4.7 | AX Free 免费;AX Pro $50 per month;AX Enterprise Custom。 | 端到端追踪;Signal 问题发现;多方式评估;Alyx 工程 Agent | Web / API / Self-Hosted / SaaS |
| Intellexie | — | 未标价 | 利用 Intellexie AI 提升网站的可访问性和效率 | Web |
| ItsAlreadyTaken | — | 未标价 | AI 名称生成器,用于检查域名的可用性和避免商标问题 | — |
| MyLens | — | Free $0;Pro $12/月;Premium $24/月;Business | 一款免费的 AI 工具,用于从各种内容生成时间线和互动可视化 | Web |
| 天文大科学研究中心 | — | 未标价 | 以天文大科学装置及重要天文观测设备为核心 | — |
| FiddleCube | — | 未标价 | 快速生成问答数据,评估语言模型 | — |