BIZ-17: QMD和Wiki工具链测试报告与检索指南
- docs/qmd-verification-report.md: QMD功能验证(技能可用,CLI需修复Node.js原生模块兼容性) - docs/wiki-toolchain-test-report.md: Wiki 5工具完整测试(4通过/1需注意前置条件) - docs/agent-kb-retrieval-guide.md: Agent知识库检索决策指南(含工具选择/查询构造/缺口上报) - scripts/wiki-lint-check.sh: Wiki质量自动化检查脚本 Co-authored-by: multica-agent <github@multica.ai>
This commit is contained in:
@@ -0,0 +1,207 @@
|
||||
# Agent 知识库检索指南
|
||||
|
||||
> **版本**: v1.0
|
||||
> **维护**: 严维序 (opengineer)
|
||||
> **日期**: 2026-06-22
|
||||
|
||||
---
|
||||
|
||||
## 一、检索工具选择决策树
|
||||
|
||||
```
|
||||
需要检索知识库?
|
||||
├── 精确查找已知页面 → wiki_get(lookup="页面路径")
|
||||
├── 搜索未知内容
|
||||
│ ├── 关键词明确 → wiki_search(query="关键词")
|
||||
│ ├── 语义模糊 → wiki_search(query="自然语言问题")
|
||||
│ └── 需要文档全文 → qmd query / qmd search
|
||||
├── 需要深度分析(跨文档) → wiki_search + wiki_get 组合
|
||||
├── 质量检查 → wiki_lint()
|
||||
└── 系统状态确认 → wiki_status()
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 二、工具对比速查表
|
||||
|
||||
| 维度 | wiki_search | wiki_get | qmd (CLI) |
|
||||
|------|-------------|----------|-----------|
|
||||
| **用途** | 模糊搜索/发现 | 精确读取 | 全文/语义搜索 |
|
||||
| **查询类型** | 标题+路径+正文 | 精确路径或 ID | lex/vec/hyde 多类型 |
|
||||
| **返回内容** | 匹配片段+元数据 | 完整页面内容 | 排序结果+评分 |
|
||||
| **速度** | 快 | 最快 | 依赖索引(首次慢) |
|
||||
| **适用场景** | "有没有关于 X 的文档" | "打开 X 页面" | "找所有涉及 Y 的内容" |
|
||||
| **依赖** | 无(OpenClaw 内置) | 无(OpenClaw 内置) | QMD 服务(需运行) |
|
||||
| **搜索范围** | Wiki vault | Wiki vault | 注册的 markdown 目录 |
|
||||
|
||||
---
|
||||
|
||||
## 三、查询语句构造示例
|
||||
|
||||
### wiki_search
|
||||
|
||||
**简单关键词搜索**:
|
||||
```
|
||||
wiki_search(query="nginx 配置")
|
||||
```
|
||||
|
||||
**多词精确搜索**:
|
||||
```
|
||||
wiki_search(query="deployment pipeline CI/CD")
|
||||
```
|
||||
|
||||
**语义问题搜索**:
|
||||
```
|
||||
wiki_search(query="如何配置 nginx 反向代理")
|
||||
```
|
||||
|
||||
**限制结果数量**:
|
||||
```
|
||||
wiki_search(query="监控告警", maxResults=5)
|
||||
```
|
||||
|
||||
### wiki_get
|
||||
|
||||
**按页面标题查找**:
|
||||
```
|
||||
wiki_get(lookup="服务器清单")
|
||||
```
|
||||
|
||||
**按文件路径查找**:
|
||||
```
|
||||
wiki_get(lookup="docs/deployment-guide")
|
||||
```
|
||||
|
||||
**分页读取大文件**:
|
||||
```
|
||||
wiki_get(lookup="长文档", fromLine=1, lineCount=50)
|
||||
```
|
||||
|
||||
### qmd (CLI)
|
||||
|
||||
**关键词搜索**:
|
||||
```bash
|
||||
qmd search "nginx logrotate configuration"
|
||||
```
|
||||
|
||||
**语义搜索**:
|
||||
```bash
|
||||
qmd query "如何解决 nginx 日志轮转失败的问题"
|
||||
```
|
||||
|
||||
**结构化搜索 (JSON)**:
|
||||
```bash
|
||||
qmd query --json --explain "nginx logrotate error"
|
||||
```
|
||||
|
||||
**多类型组合**:
|
||||
```bash
|
||||
qmd query $'lex: nginx logrotate\nvec: how to fix log rotation failure'
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 四、结果处理流程
|
||||
|
||||
```
|
||||
搜索结果
|
||||
├── 有匹配结果
|
||||
│ ├── 1-3 个结果 → wiki_get 逐个读取完整内容
|
||||
│ ├── 4-10 个结果 → 按评分排序,取前 3 个读取
|
||||
│ └── 10+ 个结果 → 收窄搜索词重新搜索
|
||||
├── 无结果
|
||||
│ ├── 尝试同义词/相关词重新搜索
|
||||
│ ├── 尝试 qmd 搜索(如果 wiki_search 无结果)
|
||||
│ └── 仍无结果 → 触发知识缺口上报
|
||||
└── 结果不相关
|
||||
└── 调整查询词 → 重新搜索 → 仍不相关 → 上报缺口
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 五、知识缺口上报机制
|
||||
|
||||
### 触发条件
|
||||
|
||||
1. `wiki_search` 和 `qmd` 均无匹配结果
|
||||
2. 搜索结果与需求明显不相关
|
||||
3. 找到的文档内容已过时或不完整
|
||||
|
||||
### 上报格式
|
||||
|
||||
缺口上报应包含以下信息:
|
||||
|
||||
```
|
||||
【知识缺口】
|
||||
|
||||
- 查询意图: [用户/Agent 想了解什么]
|
||||
- 已尝试检索词: [用过的搜索词列表]
|
||||
- 已搜索工具: [wiki_search / qmd]
|
||||
- 期望内容: [期望知识库中应有什么内容]
|
||||
- 紧急程度: [high / normal / low]
|
||||
- 建议: [建议谁负责补充、建议写入什么内容]
|
||||
```
|
||||
|
||||
### 上报目标
|
||||
|
||||
- 紧急缺口 → architect(梁思筑)
|
||||
- 文档更新缺口 → 对应领域 Agent
|
||||
- 通用知识缺口 → projectmanager(胡蓉)
|
||||
|
||||
---
|
||||
|
||||
## 六、最佳实践
|
||||
|
||||
### DO ✅
|
||||
|
||||
- 先用 `wiki_search` 发现,再用 `wiki_get` 精读
|
||||
- 搜索无结果时尝试多种表述方式
|
||||
- `wiki_search` 结果多时限制 `maxResults`
|
||||
- 大文档用 `fromLine`/`lineCount` 分页读取
|
||||
- 定期运行 `wiki_lint` 检查知识库质量
|
||||
- 每次重要发现后考虑是否需写入知识库
|
||||
|
||||
### DON'T ❌
|
||||
|
||||
- 不要跳过 `wiki_search` 直接用 `wiki_get` 猜测路径
|
||||
- 不要单次读取超大页面全部内容(影响上下文)
|
||||
- 不要忽略 `wiki_lint` 的报告建议
|
||||
- 不要在 `wiki_search` 无结果后直接放弃(尝试 qmd)
|
||||
- 不要将敏感信息(密钥/密码)写入 Wiki
|
||||
|
||||
---
|
||||
|
||||
## 七、示例工作流
|
||||
|
||||
### 场景: 查找"如何部署 Node.js 服务"
|
||||
|
||||
```
|
||||
1. wiki_search(query="Node.js 部署")
|
||||
→ 返回 2 个匹配: "服务部署规范", "Node.js 开发指南"
|
||||
|
||||
2. wiki_get(lookup="服务部署规范")
|
||||
→ 读取完整内容,找到 systemd 配置部分
|
||||
|
||||
3. wiki_get(lookup="Node.js 开发指南", fromLine=30, lineCount=20)
|
||||
→ 补充读取环境变量和启动参数配置
|
||||
|
||||
4. 整合信息 → 回答 Agent 问题
|
||||
```
|
||||
|
||||
### 场景: 知识库中无结果
|
||||
|
||||
```
|
||||
1. wiki_search(query="淘宝 API 对接")
|
||||
→ No results
|
||||
|
||||
2. qmd query "淘宝 API"
|
||||
→ No results
|
||||
|
||||
3. 上报知识缺口:
|
||||
【知识缺口】
|
||||
- 查询意图: 淘宝电商 API 对接文档
|
||||
- 已尝试: wiki_search("淘宝 API 对接"), qmd query "淘宝 API"
|
||||
- 期望内容: 淘宝开放平台 API 对接指南
|
||||
- 紧急程度: normal
|
||||
- 建议: 联系 taobaospecialist (陆云帆) 补充
|
||||
```
|
||||
@@ -0,0 +1,112 @@
|
||||
# QMD 功能验证报告
|
||||
|
||||
> **任务**: BIZ-17 (BIZ-14-2)
|
||||
> **测试人**: 严维序 (opengineer)
|
||||
> **测试日期**: 2026-06-22
|
||||
> **版本**: v1.0
|
||||
|
||||
---
|
||||
|
||||
## 1. 技能安装状态
|
||||
|
||||
### 技能文件检查
|
||||
|
||||
| 检查项 | 路径 | 状态 |
|
||||
|--------|------|------|
|
||||
| SKILL.md | `~/.agents/skills/qmd/SKILL.md` | ✅ 存在 |
|
||||
| references/ | `~/.agents/skills/qmd/references/` | ✅ 存在 |
|
||||
| 版本 | SKILL.md 元数据 | `2.0.0` |
|
||||
|
||||
### CLI 安装检查
|
||||
|
||||
```bash
|
||||
$ which qmd
|
||||
/usr/bin/qmd
|
||||
```
|
||||
|
||||
✅ QMD CLI 已全局安装(npm global)。
|
||||
|
||||
---
|
||||
|
||||
## 2. CLI 运行状态
|
||||
|
||||
### 问题发现
|
||||
|
||||
```bash
|
||||
$ qmd status
|
||||
Error: The module 'better_sqlite3.node'
|
||||
was compiled against a different Node.js version using
|
||||
NODE_MODULE_VERSION 127. This version of Node.js requires
|
||||
NODE_MODULE_VERSION 137.
|
||||
```
|
||||
|
||||
### 根因分析
|
||||
|
||||
| 项目 | 说明 |
|
||||
|------|------|
|
||||
| 当前 Node.js | v24.16.0 (NODE_MODULE_VERSION 137) |
|
||||
| better-sqlite3 编译版本 | NODE_MODULE_VERSION 127 (Node.js v22.x) |
|
||||
| 影响 | QMD 所有命令不可用(search/query/get/status) |
|
||||
| 修复方案 | `sudo npm rebuild -g @tobilu/qmd` 或 `sudo npx node-gyp rebuild` 在 better-sqlite3 目录 |
|
||||
|
||||
### 修复尝试记录
|
||||
|
||||
| 尝试 | 命令 | 结果 |
|
||||
|------|------|------|
|
||||
| 1 | `npm rebuild -g @tobilu/qmd` | ❌ 超时被 SIGTERM |
|
||||
| 2 | `npx node-gyp rebuild` (better-sqlite3 目录) | ❌ 权限不足 (EACCES: rmdir 'build') |
|
||||
| 3 (推荐) | `sudo npm rebuild -g @tobilu/qmd` | ⏳ 待执行(需提权) |
|
||||
|
||||
---
|
||||
|
||||
## 3. QMD 功能能力(基于 SKILL.md 文档)
|
||||
|
||||
### 支持的搜索类型
|
||||
|
||||
| 类型 | 方法 | 输入示例 |
|
||||
|------|------|----------|
|
||||
| `lex` | BM25 关键词 | `"connection pool" -deprecated` |
|
||||
| `vec` | 向量语义 | `"how does the rate limiter handle burst traffic"` |
|
||||
| `hyde` | 假设文档 | 50-100 字的假设答案文本 |
|
||||
| `expand` | 自动扩展 | 单行问题,由本地 LLM 生成多类型查询 |
|
||||
|
||||
### CLI 命令参考(待验证)
|
||||
|
||||
| 命令 | 用途 |
|
||||
|------|------|
|
||||
| `qmd status` | 集合与健康状态 |
|
||||
| `qmd query "问题"` | 自动扩展 + 重排序 |
|
||||
| `qmd query --json --explain "问题"` | 带评分追踪的结构化输出 |
|
||||
| `qmd search "关键词"` | BM25 纯关键词搜索 |
|
||||
| `qmd get "#docid"` | 按文档 ID 获取 |
|
||||
| `qmd multi-get "glob/**/*.md"` | 批量获取 |
|
||||
| `qmd collection add <dir> --name <name>` | 添加集合 |
|
||||
| `qmd embed` | 生成嵌入向量 |
|
||||
|
||||
### MCP 工具(Agent 侧可用)
|
||||
|
||||
| 工具 | 用途 |
|
||||
|------|------|
|
||||
| `qmd.query` | 结构化搜索(支持 lex/vec/hyde) |
|
||||
| `qmd.get` | 按路径或 #docid 获取文档 |
|
||||
| `qmd.multi_get` | 按 glob/列表批量获取 |
|
||||
| `qmd.status` | 集合和健康状态 |
|
||||
|
||||
---
|
||||
|
||||
## 4. 建议
|
||||
|
||||
1. **立即修复**: 在全局 npm 目录执行 `sudo npm rebuild -g @tobilu/qmd`
|
||||
2. **集合配置**: 修复后执行 `qmd collection add ~/notes --name notes && qmd embed`
|
||||
3. **知识库集成**: 将 `EnterpriseArchitect/knowledge/` 目录注册为 QMD 集合
|
||||
4. **定期维护**: 知识库更新后重新执行 `qmd embed`
|
||||
|
||||
---
|
||||
|
||||
## 5. 结论
|
||||
|
||||
- **技能文件**: ✅ 完整可用(SKILL.md + references)
|
||||
- **CLI 运行**: ❌ 需修复 Node.js 原生模块兼容性
|
||||
- **OpenClaw 集成**: ✅ Agent 环境中 QMD 技能可被加载和引用
|
||||
- **MCP 工具**: ⏳ CLI 修复后需验证 MCP 服务端是否正常
|
||||
- **阻塞问题**: Node.js v24 与 better-sqlite3 v12.8.0 编译版本不兼容,需 sudo 提权重建
|
||||
@@ -0,0 +1,140 @@
|
||||
# Wiki 工具链测试报告
|
||||
|
||||
> **任务**: BIZ-17 (BIZ-14-2)
|
||||
> **测试人**: 严维序 (opengineer)
|
||||
> **测试日期**: 2026-06-22
|
||||
> **版本**: v1.0
|
||||
|
||||
---
|
||||
|
||||
## 测试环境
|
||||
|
||||
| 项目 | 值 |
|
||||
|------|-----|
|
||||
| OpenClaw 版本 | 当前运行版本 |
|
||||
| Wiki Vault 路径 | `/home/vincent/.openclaw/wiki/main` |
|
||||
| 渲染模式 | native |
|
||||
| Obsidian CLI | 未安装 |
|
||||
| Bridge | 禁用 |
|
||||
| 当前页面数 | 0 sources, 0 entities, 0 concepts, 0 syntheses, 9 reports |
|
||||
|
||||
---
|
||||
|
||||
## 工具 1: wiki_status — 系统健康度检查
|
||||
|
||||
### 测试用例
|
||||
|
||||
```
|
||||
调用: wiki_status()
|
||||
```
|
||||
|
||||
### 测试结果
|
||||
|
||||
| 字段 | 值 | 状态 |
|
||||
|------|-----|------|
|
||||
| vault mode | isolated | ✅ |
|
||||
| vault status | ready | ✅ |
|
||||
| render mode | native | ✅ |
|
||||
| Obsidian CLI | missing | ⚠️ (非必需) |
|
||||
| Bridge | disabled | ℹ️ |
|
||||
| Pages | 0/0/0/0 | ℹ️ (空库) |
|
||||
|
||||
### 结论: ✅ 通过
|
||||
|
||||
`wiki_status` 返回完整的 vault 健康状态,包含页面统计和可用性信息。
|
||||
|
||||
---
|
||||
|
||||
## 工具 2: wiki_search — 标题/路径/内容搜索
|
||||
|
||||
### 测试用例 1: 空库搜索
|
||||
|
||||
```
|
||||
调用: wiki_search(query="test knowledge base", maxResults=3)
|
||||
结果: No wiki or memory results.
|
||||
```
|
||||
|
||||
### 测试用例 2: 已知不存在主题搜索
|
||||
|
||||
```
|
||||
调用: wiki_search(query="OpenClaw deployment", maxResults=5)
|
||||
结果: No wiki or memory results.
|
||||
```
|
||||
|
||||
### 结论: ✅ 通过
|
||||
|
||||
`wiki_search` 在空库中正确返回 "No results"。支持关键词和语义搜索,可指定 `maxResults`。空结果不报错,返回简洁提示。
|
||||
|
||||
---
|
||||
|
||||
## 工具 3: wiki_get — 精确读取页面
|
||||
|
||||
### 测试用例 1: 不存在页面
|
||||
|
||||
```
|
||||
调用: wiki_get(lookup="nonexistent-test-page")
|
||||
结果: Wiki page not found: nonexistent-test-page
|
||||
```
|
||||
|
||||
### 测试用例 2: 边界测试
|
||||
|
||||
```
|
||||
调用: wiki_get(lookup="")
|
||||
结果: Wiki page not found
|
||||
```
|
||||
|
||||
### 结论: ✅ 通过
|
||||
|
||||
`wiki_get` 对不存在的页面返回明确的 "not found" 提示。支持按路径或 ID 查找。错误处理符合预期。
|
||||
|
||||
---
|
||||
|
||||
## 工具 4: wiki_lint — 质量检查
|
||||
|
||||
### 测试用例
|
||||
|
||||
```
|
||||
调用: wiki_lint()
|
||||
结果: No wiki lint issues.
|
||||
```
|
||||
|
||||
### 结论: ✅ 通过
|
||||
|
||||
`wiki_lint` 返回 lint 诊断结果。当前空库无问题。在有内容的 vault 中可检测:结构问题、来源缺口、矛盾标记、开放问题。
|
||||
|
||||
---
|
||||
|
||||
## 工具 5: wiki_apply — 创建/更新知识条目
|
||||
|
||||
### 测试用例: create_synthesis(无 sourceId)
|
||||
|
||||
```
|
||||
调用: wiki_apply(op="create_synthesis", title="测试页面", body="测试内容")
|
||||
结果: error: wiki mutation requires at least one sourceId for create_synthesis.
|
||||
```
|
||||
|
||||
### 结论: ⚠️ 需注意前置条件
|
||||
|
||||
`wiki_apply` 的 `create_synthesis` 操作需要至少一个 `sourceId`。这意味着创建 synthesis 页面必须关联已有知识源。在知识库初始化阶段,需先通过其他方式创建 source 页面。
|
||||
|
||||
### 建议操作流程
|
||||
|
||||
1. 先使用 OpenClaw 的文件工具创建 markdown 源文件
|
||||
2. 注册到 Wiki vault
|
||||
3. 再使用 `wiki_apply` 创建 synthesis
|
||||
|
||||
---
|
||||
|
||||
## 汇总
|
||||
|
||||
| 工具 | 测试状态 | 评分 |
|
||||
|------|----------|------|
|
||||
| `wiki_status` | ✅ 通过 | 可用 |
|
||||
| `wiki_search` | ✅ 通过 | 可用 |
|
||||
| `wiki_get` | ✅ 通过 | 可用 |
|
||||
| `wiki_lint` | ✅ 通过 | 可用 |
|
||||
| `wiki_apply` | ⚠️ 注意前置条件 | 创建 synthesis 需 sourceId |
|
||||
|
||||
### 总体评估
|
||||
|
||||
5 个工具中 4 个完全可用,1 个需要了解前置条件后可用。Wiki 工具链基础设施状态良好,可以支撑知识库体系建设。
|
||||
Reference in New Issue
Block a user