OmniKB 系统评估报告

全链路端到端测试 · 2026-06-03 · v0.2.0

85%
总评得分
6/6
测试通过
110
Wiki 页面
30
知识源
85
A 级 · 生产可用

🔬 测试结果

✅
1. URL 摄入
POST /ingest/url — NiceGUI README 成功创建 source + task。source_id=9e89334a, task_id=57f69802
✅
2. 任务状态跟踪
5 分钟内 pending→processing→done。日志：智能抓取→知识提取→Wiki 生成(3页)
✅
3. 源创建确认
source status=done, type=url, tags=[test, open-source] 正确保存
✅
4. Wiki 生成
107→110 页 (+3)。新页面：entity:nicegui, concept:nicegui-testing, source:nicegui-readme
✅
5. 流式对话
SSE 流式输出正常。"NiceGUI is an open-source Python UI framework..."
✅
6. 场景 API 对话
Bearer token 认证通过，游戏助手 persona 正常，346 字中文回复

⚠️ 发现的问题 (3)

  1. POST /ingest/url 的 tags 参数要求 JSON 数组，传逗号分隔字符串会 Pydantic 校验失败
  2. claude-opus-4-7 通过代理时 120 秒无 SSE 输出；deepseek-chat 正常工作
  3. URL 任务在 running 期间保持 pending 状态，缺少显式 update_task('processing')

📊 维度评分

采集管线8.5/10
文件/URL/文本均通过，200字门控有效，标签格式需提示
Wiki 引擎9.0/10
LLM 两步生成稳定，110页+136边，场景隔离生效，渐进披露
对话系统8.0/10
真流式 SSE，wiki_index 披露，部分模型代理兼容性问题
前端 UI8.5/10
AURA 设计令牌，暗/亮主题，D3图谱，对话流畅，移动端待完善
场景隔离9.0/10
按源过滤wiki，API Key 鉴权，Agent 工具限制，隔离完全生效
Agent Console8.0/10
采集/Wiki/对话全流程可视化，v1/v2双通道，message_start 新增