Preserve continued build-index evidence for restart continuity
Capture the next downstream checkpoint so restart docs reflect that the real FMA smoke remains in build-index, with no evaluate stage yet and no emitted index artifacts so far. Constraint: Final downstream evidence is still unavailable because build-index has not produced artifacts or switched to evaluate Rejected: Wait silently for evaluate to start | would leave the handoff missing the latest verified downstream state Confidence: high Scope-risk: narrow Directive: Next verify the first index artifact file or the transition into evaluate before changing the delivery summary again Tested: process scan showing build-index and no evaluate; presence of /tmp/fma_real_smoke_stopcheck/fma_index_smoke directory; validate-splits on /tmp/fma_real_smoke_stopcheck/fma/manifests Not-tested: Completed build-index output, evaluate, final metrics/report generation
Showing
4 changed files
with
46 additions
and
0 deletions
| 1 | ## 2026-06-02 真实 FMA smoke build-index 延续 checkpoint | ||
| 2 | |||
| 3 | 完成项: | ||
| 4 | - 再次检查真实 FMA smoke 的下游阶段,确认流程仍停留在 `build-index`。 | ||
| 5 | - 更新 `docs/session-handoff.md` 与 `docs/changelist-2026-06-02.md`,记录到 12:39 UTC 仍未出现索引产物文件或 `evaluate.py`。 | ||
| 6 | |||
| 7 | 验证结果: | ||
| 8 | - 当前仍存在 `run_demo.py build-index --data /tmp/fma_real_smoke_stopcheck/fma/manifests --model /tmp/fma_real_smoke_stopcheck/fma_models_smoke/best_model.pt ...` | ||
| 9 | - 当前仍未观测到 `evaluate.py` 进程 | ||
| 10 | - `/tmp/fma_real_smoke_stopcheck/fma_index_smoke/` 目录存在,但尚未看到索引产物文件 | ||
| 11 | - `validate-splits /tmp/fma_real_smoke_stopcheck/fma/manifests` => `ok=true` | ||
| 12 | |||
| 13 | 结论: | ||
| 14 | - 真实 FMA 全量 smoke 已稳定停留在建索引阶段,但尚未进入评测阶段。 | ||
| 15 | - 下一关键证据仍是索引产物出现或 `evaluate.py` 启动。 | ||
| 16 | |||
| 1 | ## 2026-06-02 真实 FMA smoke build-index 持续阶段 checkpoint | 17 | ## 2026-06-02 真实 FMA smoke build-index 持续阶段 checkpoint |
| 2 | 18 | ||
| 3 | 完成项: | 19 | 完成项: | ... | ... |
| ... | @@ -240,3 +240,11 @@ cd /workspace/acr-engine | ... | @@ -240,3 +240,11 @@ cd /workspace/acr-engine |
| 240 | - 已确认索引目录 `/tmp/fma_real_smoke_stopcheck/fma_index_smoke/` 已创建。 | 240 | - 已确认索引目录 `/tmp/fma_real_smoke_stopcheck/fma_index_smoke/` 已创建。 |
| 241 | - 截至该时点,尚未看到新的索引产物文件,也未切换到 `evaluate.py`。 | 241 | - 截至该时点,尚未看到新的索引产物文件,也未切换到 `evaluate.py`。 |
| 242 | - manifest 复核继续通过,统计保持不变。 | 242 | - manifest 复核继续通过,统计保持不变。 |
| 243 | |||
| 244 | |||
| 245 | ## 12:39 UTC build-index 延续补充 | ||
| 246 | |||
| 247 | - 已确认主下游进程仍是 `run_demo.py build-index ...`。 | ||
| 248 | - 已确认 `evaluate.py` 仍未出现。 | ||
| 249 | - 已确认索引目录仍只有目录本身,尚未看到新的索引产物文件。 | ||
| 250 | - manifest 复核继续通过,统计保持不变。 | ... | ... |
| ... | @@ -38,6 +38,7 @@ | ... | @@ -38,6 +38,7 @@ |
| 38 | - 当前主流程已进入 `build-index`,说明这轮真实 smoke 不再只是“长时间 CPU 训练进行中”,而是已经进入下游索引阶段。 | 38 | - 当前主流程已进入 `build-index`,说明这轮真实 smoke 不再只是“长时间 CPU 训练进行中”,而是已经进入下游索引阶段。 |
| 39 | - 下一关键证据变为:索引完成后是否切入 `evaluate`,以及最终 metrics/report 是否生成。 | 39 | - 下一关键证据变为:索引完成后是否切入 `evaluate`,以及最终 metrics/report 是否生成。 |
| 40 | - 截至 2026-06-02 12:37 UTC,主流程仍停留在 `build-index`;索引目录已创建,但尚未观测到索引产物文件或 `evaluate.py` 进程。 | 40 | - 截至 2026-06-02 12:37 UTC,主流程仍停留在 `build-index`;索引目录已创建,但尚未观测到索引产物文件或 `evaluate.py` 进程。 |
| 41 | - 截至 2026-06-02 12:39 UTC,`build-index` 仍在持续,`fma_index_smoke/` 已存在但尚未看到索引产物文件,`evaluate.py` 仍未出现。 | ||
| 41 | 42 | ||
| 42 | ## 当前卡点 | 43 | ## 当前卡点 |
| 43 | 44 | ... | ... |
| ... | @@ -362,6 +362,27 @@ | ... | @@ -362,6 +362,27 @@ |
| 362 | - 当前 smoke 已稳定处于“训练完成 -> 建索引进行中”的阶段。 | 362 | - 当前 smoke 已稳定处于“训练完成 -> 建索引进行中”的阶段。 |
| 363 | - 下一关键观察点仍是“索引文件出现”或“切换到 `evaluate.py`”。 | 363 | - 下一关键观察点仍是“索引文件出现”或“切换到 `evaluate.py`”。 |
| 364 | 364 | ||
| 365 | ### build-index 延续证据(2026-06-02 12:39 UTC) | ||
| 366 | |||
| 367 | - 经过额外观察后,主下游进程仍然是: | ||
| 368 | - `PID=424691`:`run_demo.py build-index --data /tmp/fma_real_smoke_stopcheck/fma/manifests --model /tmp/fma_real_smoke_stopcheck/fma_models_smoke/best_model.pt --output /tmp/fma_real_smoke_stopcheck/fma_index_smoke --device cpu --resume --checkpoint-every-refs 100` | ||
| 369 | - `evaluate.py` 仍未出现。 | ||
| 370 | - `smoke-local` 主进程仍在: | ||
| 371 | - `PID=311494`:`external_adapters.py smoke-local fma ...` | ||
| 372 | - 索引目录仍只有目录本身: | ||
| 373 | - `/tmp/fma_real_smoke_stopcheck/fma_index_smoke/` | ||
| 374 | - 截至 12:39 UTC,仍未观测到新的索引产物文件。 | ||
| 375 | - manifest 复核仍通过: | ||
| 376 | - `ok=true` | ||
| 377 | - `catalog_references=8000` | ||
| 378 | - `train_queries=6401` | ||
| 379 | - `test_queries=1593` | ||
| 380 | - `val_queries=0` | ||
| 381 | |||
| 382 | 这说明: | ||
| 383 | - 当前 smoke 已稳定进入并停留在 `build-index` 阶段。 | ||
| 384 | - 下一关键观察点依旧是“索引产物首次出现”或“切换到 `evaluate.py`”。 | ||
| 385 | |||
| 365 | ### 重启后第一优先级动作 | 386 | ### 重启后第一优先级动作 |
| 366 | 387 | ||
| 367 | 1. 先检查真实 FMA smoke 是否完成: | 388 | 1. 先检查真实 FMA smoke 是否完成: | ... | ... |
-
Please register or sign in to post a comment