🐛 Fix review binding races and unblock queued work #29

Merged
zhanghongming merged 4 commits from codex/review-scheduler-fix-20260929 into dev 2026-09-30 17:44:28 +08:00
Collaborator

连续审查可能在 start/bind 尚未完成时先提交正式决定,导致任务状态改变后接续失败;Worker 则将慢速维护扫描串在派发前,并只读取最新 100 条排队任务,使较早工作流积压长期无法进入候选。

本 PR 依赖 #28,以 codex/acceptance-loading-20260929 为基线,只提取本次审查绑定、派发修复及线上既有重试保护。线上已部署的源提交为 6f8b6a7f;PR 为移植提交,保留基线其他功能,没有混入其他待合并 PR 的全部改动。

  • 正式决定等待绑定完成并校验页面作用域,长请求期间继续续租;确认成功后再请求下一条。另一页面占用连续审查时给出明确提示。
  • 专用分页查询按创建时间选择已就绪、无有效租约的任务,跳过已满工作流;保留人工释放任务原有规则。
  • 对象发现、人工释放、指标对账及维护分别串行运行,不再阻塞派发;增加分项耗时和错误观察指标。
  • 保留线上 Worker 6196aa2b 已有的重试状态/租约保护、失败历史、次数递增及范围重试上游输入。未批量重试历史任务。
  • 无数据库迁移、客户记录批处理或交付 JSON 变更;没有改变并发配置,也未新增跨 Run 的全局容量原子锁。

验证:

  • PR 分支:前端类型检查、构建,真实 Hook 的质检/终审绑定延迟回归,Go retry/storage race 回归通过;本地 Mongo 派发、恢复和审查 API 回归结果见提交前检查。
  • 部署源版本:公司集群内部账号完成 4 次正式通过/打回与 next 请求,持久状态已核对。质检通过场景的下一条被前一测试页遗留租约占用;到期后独立补测编辑和绑定成功。其余三个场景同页接续可编辑。保留原始失败证据,不宣称四次均一次性无中断通过。
  • 批注保存、修改、清除以及短时真实视频播放已验证,写测试仅使用本轮授权的 4 条内部隔离任务及其配套记录。
  • 两台 Worker 调度周期采样由约 348/357 秒降至 4.3–4.8 秒;两个旧积压工作流开始处理,实际样本维持全局 3/工作流至多 2。慢发现仍约 182–186 秒但不阻塞派发,不将采样视为所有并发情形的保证。
  • 初期存在锁忙和一次数据库读取超时,相关任务随后恢复到待人工阶段;既有 4 条恢复试点仍为待人工,未重新执行。完整五角色、多供应商、切片故障恢复与 12 人并发套件未重跑。
  • 源分支全量测试中的前端 14 项及 Worker 4 类既有失败已按具体案例对比,无新增同类回归;不宣称全量测试通过。

发布记录:review-scheduler-20260929。三个组件的旧镜像、配置及条件回退脚本已保留;回退仅调整镜像与构建标记,不回灌数据库、不覆盖客户新标注。详见 docs/review-scheduler-fixes-2026-09-29.md。

连续审查可能在 start/bind 尚未完成时先提交正式决定,导致任务状态改变后接续失败;Worker 则将慢速维护扫描串在派发前,并只读取最新 100 条排队任务,使较早工作流积压长期无法进入候选。 本 PR 依赖 #28,以 `codex/acceptance-loading-20260929` 为基线,只提取本次审查绑定、派发修复及线上既有重试保护。线上已部署的源提交为 `6f8b6a7f`;PR 为移植提交,保留基线其他功能,没有混入其他待合并 PR 的全部改动。 - 正式决定等待绑定完成并校验页面作用域,长请求期间继续续租;确认成功后再请求下一条。另一页面占用连续审查时给出明确提示。 - 专用分页查询按创建时间选择已就绪、无有效租约的任务,跳过已满工作流;保留人工释放任务原有规则。 - 对象发现、人工释放、指标对账及维护分别串行运行,不再阻塞派发;增加分项耗时和错误观察指标。 - 保留线上 Worker 6196aa2b 已有的重试状态/租约保护、失败历史、次数递增及范围重试上游输入。未批量重试历史任务。 - 无数据库迁移、客户记录批处理或交付 JSON 变更;没有改变并发配置,也未新增跨 Run 的全局容量原子锁。 验证: - PR 分支:前端类型检查、构建,真实 Hook 的质检/终审绑定延迟回归,Go retry/storage race 回归通过;本地 Mongo 派发、恢复和审查 API 回归结果见提交前检查。 - 部署源版本:公司集群内部账号完成 4 次正式通过/打回与 next 请求,持久状态已核对。质检通过场景的下一条被前一测试页遗留租约占用;到期后独立补测编辑和绑定成功。其余三个场景同页接续可编辑。保留原始失败证据,不宣称四次均一次性无中断通过。 - 批注保存、修改、清除以及短时真实视频播放已验证,写测试仅使用本轮授权的 4 条内部隔离任务及其配套记录。 - 两台 Worker 调度周期采样由约 348/357 秒降至 4.3–4.8 秒;两个旧积压工作流开始处理,实际样本维持全局 3/工作流至多 2。慢发现仍约 182–186 秒但不阻塞派发,不将采样视为所有并发情形的保证。 - 初期存在锁忙和一次数据库读取超时,相关任务随后恢复到待人工阶段;既有 4 条恢复试点仍为待人工,未重新执行。完整五角色、多供应商、切片故障恢复与 12 人并发套件未重跑。 - 源分支全量测试中的前端 14 项及 Worker 4 类既有失败已按具体案例对比,无新增同类回归;不宣称全量测试通过。 发布记录:`review-scheduler-20260929`。三个组件的旧镜像、配置及条件回退脚本已保留;回退仅调整镜像与构建标记,不回灌数据库、不覆盖客户新标注。详见 `docs/review-scheduler-fixes-2026-09-29.md`。
zhanghongming added 3 commits 2026-09-29 23:56:36 +08:00
(cherry picked from commit ea9dd2fc79cac1a3c2c02fe34ad9491119a4a848)
(cherry picked from commit 6f8b6a7f01bfdbb55f501c60e121ede64d52c5a4)
zhanghongming added 2 commits 2026-09-30 17:44:27 +08:00
Integrate the approved recent changes; preserve the feature branch and previous history.
zhanghongming changed target branch from codex/acceptance-loading-20260929 to dev 2026-09-30 17:44:27 +08:00
zhanghongming merged commit 1d4cfffc55 into dev 2026-09-30 17:44:28 +08:00
Owner

@zhanghongming 过去 8 天自合并 PR 回溯审查(2026-10-08)。实际增量:0d7bb24e → 1d4cfffc。

Standards

未发现可确认的新增规范缺陷。正式提交等待 start/bind,期间保留续租;分页派发保留工作流容量和人工释放例外;重试版本/租约保护、历史及上游输入均保留。建议增加 bind 尚未完成时暂停/切换作用域,以及维护请求阻塞时取消退出的确定性测试。

Spec

未发现可确认的新增功能缺陷。按创建时间越过单页积压与已满工作流,慢发现/维护脱离派发路径,与声明一致。跨 Run 全局容量原子锁在本 PR 明确不属新增能力,既有缺口不重复记为本 PR 回归;并发采样也不能证明这个保证。

验证:Store/Worker 定向 -race 测试通过,覆盖 FIFO、backoff/租约筛选、超过 100 条积压、满工作流跳过、慢维护、重启/并发领取及重试历史;lint:web、diff --check 通过。Mongo 分支按 opt-in 跳过,浏览器绑定脚本仅审读。本轮未执行真实集群验收。

@zhanghongming 过去 8 天自合并 PR 回溯审查(2026-10-08)。实际增量:0d7bb24e → 1d4cfffc。 ### Standards 未发现可确认的新增规范缺陷。正式提交等待 start/bind,期间保留续租;分页派发保留工作流容量和人工释放例外;重试版本/租约保护、历史及上游输入均保留。建议增加 bind 尚未完成时暂停/切换作用域,以及维护请求阻塞时取消退出的确定性测试。 ### Spec 未发现可确认的新增功能缺陷。按创建时间越过单页积压与已满工作流,慢发现/维护脱离派发路径,与声明一致。跨 Run 全局容量原子锁在本 PR 明确不属新增能力,既有缺口不重复记为本 PR 回归;并发采样也不能证明这个保证。 验证:Store/Worker 定向 -race 测试通过,覆盖 FIFO、backoff/租约筛选、超过 100 条积压、满工作流跳过、慢维护、重启/并发领取及重试历史;lint:web、diff --check 通过。Mongo 分支按 opt-in 跳过,浏览器绑定脚本仅审读。本轮未执行真实集群验收。
Sign in to join this conversation.
No Reviewers
No Label
2 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: longtao.wu/droboticflow#29
No description provided.