test(dispatcher): Handle 入口级集成测试 —— 钉死核心编排链 + harness 治理栈协同
此前测试都直打 runGraph/evaluate,绕过真正的任务入口 Handle()——熔断、输入护栏门控、 状态机流转、token 预算、异步评测/用量这些治理逻辑的协同从未在入口级被覆盖。 新增 handle_test.go 6 例(全 fake 依赖,可断言各出口): - HappyPath:running→done + token 流出/收尾 + 异步评测落库(ok) - ToolFeedsAgent:图执行→工具→agent 全程经 Handle,工具被调、产出注入 - CircuitBreakerOpen:熔断开 → 快速 failed、不执行图 - BudgetExceeded:meta token_budget=3 → failed + 用量回写带 Exceeded - GuardrailBlocks:灰区 + LLM 分类器命中 → rejected、不进 running - EmptyTaskDropped:空 id 直接丢弃、无状态回写 配套 fakeStatus/fakeUsageSink;fakeEvalSink 加锁(Handle 异步评测在 goroutine 写)。 go test -race ./internal/eino 干净,四模块全绿。 Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
This commit is contained in:
+3
-3
@@ -135,7 +135,7 @@ Harness = 围绕 LLM 的可靠性 / 安全 / 质量治理层。4 个组件均为
|
||||
- **compose 引擎仍灰度**(默认走自研 graph.go);compose 路径下 HITL 审批未实现。
|
||||
- **OCR 多模态是骨架**:`parse_document` 真支持 txt/md/csv/docx/xlsx/文本 PDF,但 MinerU/PaddleOCR 扫描件路径是 TODO 空实现(`mineru.py` 极小)。
|
||||
- **推理模型已部分适配**:reasoning 模型的 `reasoning_content` 已捕获并 surface 到 exec 轨迹「推理过程」事件(不污染答案);尚未在最终答案区把思维链单独流式呈现给前端。
|
||||
- **测试偏单元**:多为小函数单测;核心链路(图执行、RAG 管线)集成/e2e 稀疏;无前端 E2E。
|
||||
- **测试纵深改善中**:除小函数单测,已补 `Handle()` 入口级集成测试(熔断/护栏/预算/状态机/工具→agent/异步评测 6 例,-race 干净)+ bus 真实 NATS e2e;剩 RAG 管线集成、前端 E2E。
|
||||
|
||||
---
|
||||
|
||||
@@ -190,7 +190,7 @@ Harness = 围绕 LLM 的可靠性 / 安全 / 质量治理层。4 个组件均为
|
||||
| 可观测性 | ⭐⭐⭐⭐ | OTel+Prometheus+slog;轨迹流会丢事件 |
|
||||
| 性能 / 并发 | ⭐⭐⭐½ | 双扩机制具备;规模未实测 |
|
||||
| 代码质量 | ⭐⭐⭐⭐ | 注释充足、降级完善;KbView 大文件需拆 |
|
||||
| 测试覆盖 | ⭐⭐⭐ | 单测面广但多为小函数;集成/e2e 稀疏 |
|
||||
| 测试覆盖 | ⭐⭐⭐½ | 单测面广 + Handle 入口集成 + bus 真实 NATS e2e;剩 RAG 管线集成、前端 E2E |
|
||||
| CI/CD | ⭐⭐⭐⭐ | CI+Release+更新检查;无签名公证 |
|
||||
| 运维成熟度 | ⭐⭐ | 单点、无备份灾备、无配额、规模未验证 |
|
||||
| 生态 / 商业化 | ⭐⭐ | 个人项目;计费未闭环 |
|
||||
@@ -208,7 +208,7 @@ Harness = 围绕 LLM 的可靠性 / 安全 / 质量治理层。4 个组件均为
|
||||
| ~~P1~~ 🟡 | 高可用(代码层就绪):调度/工具本就队列组可多副本(实测 2 副本 8 任务 4/4 分摊);**网关改为队列组订阅**(eval/usage/status/config),多副本不再重复落库/重复计费(单测+实测去重)。剩 NATS 集群 + 网关 LB + PG/Redis HA 属部署期 | 解单点 |
|
||||
| P1 | 备份/灾备演练(PG/Milvus/Neo4j) | 数据安全 |
|
||||
| ~~P1~~ ✅ | ~~优雅停机 drain~~:三 Go 服务全覆盖(gateway HTTP Shutdown / dispatcher 在途任务跑完 / mcp-go 在途工具回完),SIGTERM 后等在途至 SHUTDOWN_DRAIN_TIMEOUT(默认30s)再退;在途任务 ctx 脱离信号 ctx 不被掐断。**+ exec 轨迹 Redis 回放**(与 token 流同构,连晚/刷新重连不丢轨迹,实测事后连仍补齐全程)| 可靠性 |
|
||||
| P1 | 核心链路集成测试 + 前端 E2E | 测试纵深 |
|
||||
| ~~P1~~ 🟡 | ~~核心链路集成测试~~:Handle 入口级 6 例(熔断/护栏/预算/状态机/工具→agent/异步评测)已补。剩 RAG 管线集成 + 前端 E2E | 测试纵深 |
|
||||
| P2 | 计量计费闭环 + 按用户配额;OCR 完善;KbView 拆分;循环节点 | |
|
||||
| P2 | 安全审计 / 渗透(让"纵深防御"从自述变已验证) | 外部 |
|
||||
| P3 | 多租户/团队;插件体系;K8s Helm;代码签名 | |
|
||||
|
||||
Reference in New Issue
Block a user