⚡ 加速生产统计与首页摘要加载 #35

Merged
longtao.wu merged 1 commits from codex/dashboard-load-parallel-20261007 into dev 2026-10-08 11:20:41 +08:00
Collaborator

变更

并行化首页摘要、生产统计和人员工作数据的独立读取,并为生产统计 Mongo 查询增加 15 秒超时保护,降低切换服务时的串行等待和超时概率。

验证

  • 发布策略单元测试通过
  • Web 类型检查通过
  • Web 生产构建通过
  • 定向 Go API 测试通过
  • Fanyu 集群 API/处理器 rollout 已完成并 Ready
  • /api/health 与 /api/ready 返回 200,存储就绪检查通过

线上发布

已通过发布记录 dashboard-load-parallel-20261007 部署固定镜像摘要;未修改配置、存储、数据库结构或客户数据。
业务角色登录、任务领取和视频播放仍需使用隔离账号补充验收。

## 变更 并行化首页摘要、生产统计和人员工作数据的独立读取,并为生产统计 Mongo 查询增加 15 秒超时保护,降低切换服务时的串行等待和超时概率。 ## 验证 - 发布策略单元测试通过 - Web 类型检查通过 - Web 生产构建通过 - 定向 Go API 测试通过 - Fanyu 集群 API/处理器 rollout 已完成并 Ready - `/api/health` 与 `/api/ready` 返回 200,存储就绪检查通过 ## 线上发布 已通过发布记录 `dashboard-load-parallel-20261007` 部署固定镜像摘要;未修改配置、存储、数据库结构或客户数据。 业务角色登录、任务领取和视频播放仍需使用隔离账号补充验收。
zhanghongming added 3 commits 2026-10-08 11:04:28 +08:00
Owner

审查范围:原 dev 8824478498 → 本 PR 5a925af0606a;已同时核对与 #34 的最终组合。#34 已合并为 8a53d1bd2f21,重新预演本 PR 得到相同的已验证 tree e4af2386a628。按仓库所有者本次明确要求执行合并,以下问题保留为后续修复项。

Standards / Spec

[P2] 可选统计查询的独立降级被共享取消破坏。 internal/api/server.go:2003-2012(本 PR head)使用 errgroup.WithContext 并让两项查询返回错误,随后忽略 g.Wait()。humanItems 查询先失败时,会取消仍能成功的 deliveryPackages 读取;反方向同样成立。合成复现:同一测试在 PR34 两个方向均通过,PR35 与组合版本均失败;组合版 HTTP 仍返回 200,但 packageCount=0、pendingAcceptance=0,预期都是 1。正常查询收到 context canceled。这既违反内部优化保持原有契约的规范,也偏离“独立读取并行化”的目标。
建议:两项可选读取分别处理错误,避免一项失败取消另一项,仍继承原请求 context 的取消;增加双向失败注入测试,并在接口中明确数据不完整状态。

[P2,共享提交,已在 #34 记录] 多 part 源数据的异常分类丢失。 internal/productionstats/current.go:361-363 设置 part 的 ExceptionCategory,但 rollup 仅合并 Exception。首 part 正常、后续 part 失败时,汇总出现 other=1,而分类明细为空。建议传播分类并统一汇总/明细归类。具体复现与另外两项 PR34 专属统计问题见 #34 (comment) 。两条 PR 合计 4 项独立 P2,未重复计数。

验证

  • 新基线下无合并冲突,最终 tree 与预检一致;TypeScript、前端构建、25 项 release policy 测试及统计/API/worker 定向检查通过。Mongo 驱动 mock 并发读取的 race 检查通过,未连接真实 Mongo。
  • 组合接口合成测试通过:admin/supplier_manager/annotator 的 includeWorkforce=false 均跳过工作记录读取;member/day 延迟接口、pipeline/pipelineRows 字段保持兼容,未发现额外合并覆盖问题。
  • 全量检查不是全绿:前端 637 项中 14 项失败;API/worker 76 个顶层用例失败(40 个子用例失败)。与原 dev 相比失败集合完全一致,没有把已有测试问题归为本 PR 新回归。
  • Mongo 15 秒限制仅做源码检查,未作真实大数据量延迟/超时验收。本次未部署 Fanyu、未写客户数据;合并不代表已完成线上业务验收。
审查范围:原 dev 88244784982f → 本 PR 5a925af0606a;已同时核对与 #34 的最终组合。#34 已合并为 8a53d1bd2f21,重新预演本 PR 得到相同的已验证 tree e4af2386a628。按仓库所有者本次明确要求执行合并,以下问题保留为后续修复项。 ### Standards / Spec **[P2] 可选统计查询的独立降级被共享取消破坏。** `internal/api/server.go:2003-2012`(本 PR head)使用 `errgroup.WithContext` 并让两项查询返回错误,随后忽略 `g.Wait()`。humanItems 查询先失败时,会取消仍能成功的 deliveryPackages 读取;反方向同样成立。合成复现:同一测试在 PR34 两个方向均通过,PR35 与组合版本均失败;组合版 HTTP 仍返回 200,但 `packageCount=0`、`pendingAcceptance=0`,预期都是 1。正常查询收到 `context canceled`。这既违反内部优化保持原有契约的规范,也偏离“独立读取并行化”的目标。 建议:两项可选读取分别处理错误,避免一项失败取消另一项,仍继承原请求 context 的取消;增加双向失败注入测试,并在接口中明确数据不完整状态。 **[P2,共享提交,已在 #34 记录] 多 part 源数据的异常分类丢失。** `internal/productionstats/current.go:361-363` 设置 part 的 ExceptionCategory,但 rollup 仅合并 Exception。首 part 正常、后续 part 失败时,汇总出现 other=1,而分类明细为空。建议传播分类并统一汇总/明细归类。具体复现与另外两项 PR34 专属统计问题见 https://gitea.d-robotics.cc/longtao.wu/droboticflow/pulls/34#issuecomment-22222 。两条 PR 合计 4 项独立 P2,未重复计数。 ### 验证 - 新基线下无合并冲突,最终 tree 与预检一致;TypeScript、前端构建、25 项 release policy 测试及统计/API/worker 定向检查通过。Mongo 驱动 mock 并发读取的 race 检查通过,未连接真实 Mongo。 - 组合接口合成测试通过:admin/supplier_manager/annotator 的 includeWorkforce=false 均跳过工作记录读取;member/day 延迟接口、pipeline/pipelineRows 字段保持兼容,未发现额外合并覆盖问题。 - 全量检查不是全绿:前端 637 项中 14 项失败;API/worker 76 个顶层用例失败(40 个子用例失败)。与原 dev 相比失败集合完全一致,没有把已有测试问题归为本 PR 新回归。 - Mongo 15 秒限制仅做源码检查,未作真实大数据量延迟/超时验收。本次未部署 Fanyu、未写客户数据;合并不代表已完成线上业务验收。
longtao.wu merged commit bd253016f4 into dev 2026-10-08 11:20:41 +08:00
Sign in to join this conversation.
No Reviewers
No Label
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: longtao.wu/droboticflow#35
No description provided.