Gap SDK Testing

MCPAI代理

提供方 eagleisbatman

AI代理 未标注 API Key 社区 / 第三方

一个基于OpenAI SDK的农业AI代理测试框架,集成了模型上下文协议(MCP),支持批量测试、性能分析和质量保证,适用于农业AI代理的开发和测试。

一句话选型结论

按资料字段整理

Gap SDK Testing 属于AI代理类 MCP 服务器,传输方式未标注,API Key,没有现成安装命令,需按官方文档接入。接入前先确认权限范围;涉及写入、删除或付款的操作,建议先在测试环境验证。

分类AI代理 传输方式未标注 鉴权API Key 部署方式未标注
GitHub 星标 0 仓库热度,无公开仓库时显示未标注
工具数 3 暴露给模型的工具数量
资源 / 提示词 0 / 0 资源与提示词模板数量
维护方 社区 / 第三方 核验等级 仅资料核对

工具与能力

AI代理
数量来自来源目录的标注,具体工具清单以官方文档为准
工具数量3暴露给模型可调用的工具个数
资源数量0可读取的资源条目
提示词数量0内置提示词模板数量

能力标签

适用场景

农业AIJavaScript本地部署测试框架OpenAISDKMCP集成批量测试

安装与配置

未标注 API Key
上游未给出传输方式
  1. 1
    准备运行环境

    按官方文档确认运行环境(常见为 Node.js 或 Python),装好后再执行安装命令。

  2. 2
    安装服务

    复制上面的安装命令执行;命令里带占位符的位置,换成自己的密钥或路径。

  3. 3
    写入客户端配置

    在客户端的 MCP 配置里填好启动命令和参数,保存后完全退出客户端再打开,让新配置生效。

  4. 4
    验证是否可用

    连接成功后客户端会列出约 3 个工具,随便调一个只读工具确认能返回结果。

典型使用场景

3 类
按分类与标签整理的常见用法,具体以官方文档为准
给代理接外部能力

让代理在任务中途调用搜索、数据库等真实工具。

多步任务编排

把一串操作拆成步骤,由代理按顺序执行。

自动化重复流程

把固定流程交给代理跑,减少手工操作。

选择建议

选之前先看这几条
按条目字段给出的判断,不替你决定用不用

值得选的地方

  • 资料标注 3 个工具,职责相对集中,接入后不容易误操作。

先想清楚的地方

  • 没有现成安装命令,需要按官方文档自己填启动命令和参数。
  • 使用前要准备好API Key对应的凭据,并按最小权限配置。
  • 版本更新与行为细节以官方仓库为准。

更适合

  • 需要在AI代理场景里让模型直接调用外部能力的人。
  • 想先快速试一下、能接受在本地或自有环境跑服务的人。

不太适合

  • 不方便管理密钥或第三方授权的人。
  • 需要厂商级 SLA 和技术支持的生产环境。

同类对比

6 个同类
同分类里挑最接近的几条,字段以各自详情页为准
MCP 服务器工具数传输方式部署方式安装命令最后核验
Gap SDK Testing当前 3 未标注 未标注 无 2026-05-17
Filesystem 560c4363 13 未标注 本地部署 无 2026-05-17
Server Everything (everything) 11 stdio · 本地进程 本地部署 有 2026-05-17
Time 7365cb6d 2 SSE · 服务端推送 远程部署 有 2026-05-18
Everything Claude Code 未标注 stdio · 本地进程 本地部署 有 2026-05-17
Openmemory 557e1585 未标注 stdio · 本地进程 本地部署 有 2026-05-17

服务器档案

AI代理
字段来自项目仓库与公开索引,中文说明由本站标注
提供方eagleisbatman上游标注的维护方 eagleisbatman
分类AI代理本站按上游分类展示
连接方式未标注上游未给出传输方式
鉴权方式API Key远程服务建议用最小权限凭据
维护方社区 / 第三方核验等级 仅资料核对
包名 / 运行时未标注 · 未标注本地安装时用到的包标识与运行时
部署类型未标注上游给出的部署形态
最近核验2026-05-17上游最后核验时间

详细介绍

9.0 KB
来自项目仓库与上游目录的原文,未做删改

🤖 GAP SDK测试-OpenAI

使用OpenAI SDK和模型上下文协议(MCP)集成的农业人工智能代理综合测试框架。TomorrowNow全球接入平台(GAP)生态系统的一部分。


🎯 概述

该测试框架直接使用OpenAI SDK复制OpenAI Agent Builder工作流,为农业AI代理提供批量测试、性能分析和质量保证。它与MCP服务器(GAP Agriculture、AccuWeather、决策树)集成,以提供真实的测试场景。

主要特点

  • ✅ OpenAI SDK集成:直接使用 @openai/agents 为了与Agent Builder兼容
  • ✅ MCP服务器支持:与多个MCP服务器(GAP、AccuWeather)无缝集成
  • ✅ 批量测试:通过自动结果收集运行数百个查询
  • ✅ 意图分类:所有查询的自动意图检测
  • ✅ 护栏:审核、越狱检测、PII检测
  • ✅ 对话历史:在多回合对话中保持上下文
  • ✅ Excel导出:详细的结果,包括指标和分析

✨ 特性

测试能力

特性 描述
批量测试 每种语言运行5、10、100+个查询
意图分类 查询意图的自动检测
语言检测 英语/斯瓦希里语检测和处理
工具调用跟踪 监控MCP服务器呼叫成功率
护栏测试 测试调节和安全过滤器
性能指标 响应时间、成功率跟踪
Excel报表 综合测试结果导出

MCP服务器集成

  • GAP农业MCP服务器 (默认)

  • 工具: get_gap_weather_forecast

  • 覆盖范围:肯尼亚和东非
  • 功能:50个成员的集合预报,长达14天

  • AccuWeather MCP服务器 (可选)

  • 工具: get_accuweather_weather_forecast, get_accuweather_current_conditions

  • 覆盖范围:全球天气数据
  • 特点:当前状况+5天预测

🚀 快速开始

先决条件

  • Node.js>=18.0.0
  • OpenAI API密钥
  • 已部署MCP服务器(GAP或AccuWeather)

安装```bash

Clone the repository

git clone https://github.com/eagleisbatman/gap-sdk-testing.git
cd gap-sdk-testing

Install dependencies

npm install


### 配置

创建一个 `.env` 文件:```env
# Required: OpenAI API Key
OPENAI_API_KEY=sk-your-openai-api-key-here

# MCP Server Configuration (choose one)
# Option 1: Use GAP MCP Server (default)
MCP_SERVER_TYPE=GAP
GAP_MCP_URL=https://gap-agriculture-mcp-server.up.railway.app/mcp

# Option 2: Use AccuWeather MCP Server
# MCP_SERVER_TYPE=ACCUWEATHER
# ACCUWEATHER_MCP_URL=https://accuweather-mcp-server.up.railway.app/mcp

运行测试```bash

Test with 5 queries per language (default)

npm test

Test with 10 queries per language

npm run test:10

Test with 100 queries per language

npm run test:100

Custom number of queries

node batch-test-sdk.js --queries=50


______________________________________________________________________

## 📊 测试结果

结果会自动保存到 `test-results/` 带有时间戳的文件夹:```
test-results/gap-sdk-test-results-YYYY-MM-DD-HHMMSS.xlsx

Excel报表内容

  • 查询详细信息:原始查询、检测到的语言、意图分类
  • 响应分析:代理响应、工具调用、MCP数据检索
  • 性能指标:处理时间、成功/失败状态
  • 护栏结果:适度标记、PII检测
  • 概要统计:成功率、工具调用率、语言分布

🔧 建筑```

User Query
↓
Intent Classifier (intent-classifier.js)
↓
Guardrails (utils/guardrails.js)
↓
OpenAI Agent (utils/prompts.js)
↓
MCP Tool Call (hostedMcpTool)
↓
MCP Server (GAP/AccuWeather)
↓
Response Processing
↓
Excel Export (utils/excel-utils.js)


### 关键组件

- **`batch-test-sdk.js`** -主测试编排脚本
- **`intent-classifier.js`** -意图检测和语言分类
- **`utils/process-query.js`** -个人查询处理逻辑
- **`utils/guardrails.js`** -安全和适度检查
- **`utils/prompts.js`** -代理提示生成
- **`utils/excel-utils.js`** -结果导出和分析

______________________________________________________________________

## 📈 用法示例

### 基本测试```bash
# Run default test (5 queries per language)
npm test

大规模测试```bash

Run 100 queries per language (200 total)

npm run test:100


### 自定义配置```javascript
// Modify utils/config.js to change:
// - Default coordinates
// - Farmer context
// - MCP server URLs
// - Guardrail settings

🧪 测试场景

天气预报查询

  • “未来5天的天气预报是什么?”
  • “明天会下雨吗?”
  • “温度会是多少?”

农业咨询

  • “我现在应该种玉米吗?”
  • “我什么时候灌溉庄稼?”
  • “现在是施肥的好时机吗?”

  • L1:“天气预报怎么说?”

  • “明天天气怎么样?”

📊 性能指标

该框架跟踪:

  • 成功率:成功查询的百分比
  • 工具调用率:触发MCP工具的查询百分比
  • 数据检索率:成功检索MCP数据的百分比
  • 平均响应时间:每次查询的平均处理时间
  • 意图分类准确性:正确的意图检测率
  • 语言检测精度:正确的语言识别

🔒 护栏

节制

  • 通过OpenAI审核API进行内容审核
  • 自动屏蔽不适当的内容
  • 为被阻止的查询生成安全的响应

越狱检测

  • 检测快速注射企图
  • 防止系统提示操作
  • 安全处理对抗性输入

PII检测

  • 个人信息检测
  • 敏感数据匿名化
  • 隐私保护响应

🔌 MCP服务器集成

GAP农业MCP服务器

默认配置:```javascript
MCP_SERVER_TYPE=GAP
GAP_MCP_URL=https://gap-agriculture-mcp-server.up.railway.app/mcp


**工具:** `get_gap_weather_forecast`

**新闻报道:** 肯尼亚和东非

### AccuWeather MCP服务器

**配置:**```javascript
MCP_SERVER_TYPE=ACCUWEATHER
ACCUWEATHER_MCP_URL=https://accuweather-mcp-server.up.railway.app/mcp

工具:

  • get_accuweather_weather_forecast -5天预报
  • get_accuweather_current_conditions -当前天气

新闻报道: 全球


📝 查询数据库

该框架包括一个全面的查询数据库:

  • 英语查询:天气、种植、灌溉、虫害管理
  • 意图类别:天气预报、农业建议、一般问题
  • 多样性:不同的措辞和复杂程度

🛠️ 发展

项目结构```

gap-sdk-testing/
├── batch-test-sdk.js # Main test script
├── intent-classifier.js # Intent detection
├── intents.json # Intent definitions
├── utils/
│ ├── process-query.js # Query processing
│ ├── guardrails.js # Safety checks
│ ├── prompts.js # Agent prompts
│ ├── excel-utils.js # Excel export
│ └── config.js # Configuration
└── test-results/ # Generated reports
```

添加新查询

编辑 utils/query-loader.js 添加新的测试查询。

自定义提示

修改 prompts/farmerchat-template.md 用于代理行为变化。


📊 与Gemini版本的比较

这个OpenAI版本是双SDK测试方法的一部分:

  • OpenAI SDK (gap-sdk-testing)-将GPT-4o与Agent Builder一起使用
  • Gemini SDK (gap-sdk-testing-gemini)-使用具有结构化数据的Gemini 2.5 Flash

两个版本可以并行运行以进行比较测试。看 compare-sdks.js 在父目录中。


🤝 贡献

欢迎投稿!拜托:

  1. 分叉存储库
  2. 创建要素分支
  3. 为新功能添加测试
  4. 确保所有测试通过
  5. 提交拉取请求

📄 许可证

MIT许可证-请参阅 许可证 文件以获取详细信息。


🔗 相关项目

  • GAP农业MCP服务器 -天气预报MCP服务器
  • GAP SDK测试(Gemini) -谷歌Gemini SDK版本
  • TomorrowNow决策树MCP服务器 -作物咨询MCP服务器
  • TomorrowNow GAP平台 -全球接入平台

📞 支持

  • 问题: GitHub问题
  • 文档:请参阅代码注释和内联文档
  • MCP协议: 模型上下文协议

内置于❤️ TomorrowNow全球接入平台

常见问题

5 问
答案由本站依据条目字段整理,不引用上游原文
Gap SDK Testing 怎么安装?

资料没有给出安装命令,请到官方仓库或文档按说明接入;这类条目多数是生态应用,或尚未发布可安装包。

Gap SDK Testing 怎么在客户端里配置?

它的传输方式未标注,在客户端 MCP 配置里按官方文档填写启动命令和参数,保存后重启客户端生效。

Gap SDK Testing 收费吗?

本站不代收费用,也没有标注具体价格。是否收费取决于服务本身和背后的接口额度,正式使用前按官方说明确认。

Gap SDK Testing 需要 API Key 吗?

资料标注需要API Key认证,使用前准备好对应凭据,并按最小权限配置。

Gap SDK Testing 能提供哪些能力?

资料显示约 3 个工具;能力标签包括 测试框架、JavaScript、AI代理。具体工具清单以官方文档为准。

热门专题

按标签挑服务器
全部专题 →

服务器信息以作者仓库与官方文档为准;分类、传输方式与鉴权方式的中文说明为中文整理,最近核验 2026-05-17。