data-gen-bpu/AGENTS.md
ming01.wang 2da29f8050 fix: preserve deployed recovery and board cleanup behavior
Record the deployed continuation, process reaping, recovery, and cleanup fixes with the current board registry. Add focused regression coverage and document the shared production branch and existing startup configuration.
2026-09-29 01:27:19 +08:00

2.9 KiB
Raw Permalink Blame History

使用哪份代码、在哪里启动

生产运行分支固定为 production/s100p-infra-fix-20260928。Mac 的 bench/ 与服务器生产目录应检出同一分支、同一提交;main 保留旧工作线,不是当前运行版本。

  • Mac 代码目录:/Users/d-robotics/project_robo/bpu-model-0914/bench,用于查看和编辑代码。
  • 编译服务器代码目录:/mnt/data/ming01.wang/model-compile-hbdk/bench,实际采集在这里启动。
  • 代码版本看 git branch --show-current、git rev-parse HEAD、git status --short;分支名相同不代表提交或未提交改动相同。
  • 切换 Git 分支或推送不会重启已经运行的 Python 进程。运行中不覆盖源码、不清理工作树、不为统一名称重启采集器。

配置、数据与代码分开

同一份代码可通过不同 BENCH_CONFIG 运行 GLM、Qwen、S100P 或 S600。密钥和账户配置不提交 Git;本机与服务器代码相同,也不代表本机已有服务器的工具链、数据和板卡连接。

服务器启动时显式指定:

  • BENCH_ROOT=/mnt/data/ming01.wang/model-compile-hbdk/bench
  • BENCH_STATE_DIR=/home/ming01.wang/bench-state
  • BENCH_CONFIG:选定采集器现有启动回执中的配置路径。

2026-09-29 固定源码时使用的配置如下。这是复现记录,不是任务仍在运行的证明:

采集组 配置路径 当时的 run 采集并发
S100P / GLM-5.3 /home/ming01.wang/s100p-glm-8way-20260928-2124/s100p.yaml r20260927-01 8
S100P / Qwen /home/ming01.wang/qwen-autofill-20260928/s100p.yaml r20260928-02 4
S600 / GLM-5.3 /home/ming01.wang/s100p-glm-8way-20260928-2124/s600.yaml r20260927-02 8

下一次启动

  1. 先进入服务器生产目录 /mnt/data/ming01.wang/model-compile-hbdk/bench,再确认代码分支、提交、工作树状态及所选配置;以现场进程和启动回执确认 run,不把上述历史表当实时状态。
  2. 已有 run 使用原来的 run ID 和现有采集入口;先确认同一 run 没有存活 collector,再启动,避免重复采集。只有明确新建批次时才 new-run。
  3. 使用生产目录的 bin/bench collect,显式指定 --run、--modes 和 --parallel,其余参数沿用经核实的启动回执。采集并发以 collect --parallel 为准。
  4. 新启动进程会加载当前代码;已运行进程不能仅靠磁盘 Git 状态证明全部已加载模块版本一致。

任务输入在 runs/<run_id>/<job_id>/job.json,轨迹和证据在 runs/<run_id>/<job_id>/rollouts/<kk>/;状态数据库由 BENCH_STATE_DIR 决定。配置中的工作、缓存和数据路径继续沿用现有环境,不手工重置运行数据或隔离标记。

bench status --run <run_id> 查看批次状态;scripts/audit_rollouts.py --run <run_id> 查看轨迹验收。任务启动、模型回复、板测通过和最终 SFT 是不同证据,不能相互替代。