Commit 2a6e8e15 2a6e8e1558a8af0f813452c85b2fa943ddfa02f6 by cnb.bofCdSsphPA

Extend live FMA smoke handoff with later epoch evidence

Preserve a newer restart checkpoint so the next session inherits up-to-date proof that the real FMA smoke continues progressing inside Epoch 1 without yet saving a model or entering downstream stages.

Constraint: Verification is still limited to live runtime evidence because Epoch 1 has not completed
Rejected: Keep the prior 18:22 checkpoint only | would leave the handoff one monitoring cycle behind reality
Confidence: high
Scope-risk: narrow
Directive: Continue monitoring until the first saved model file or stage transition appears before changing status conclusions
Tested: ps on PID 311629; validate-splits on /tmp/fma_real_smoke_stopcheck/fma/manifests; find on /tmp/fma_real_smoke_stopcheck/fma_models_smoke
Not-tested: End-of-epoch artifacts, build-index, evaluate, final metrics
1 parent ba49a6ae
1 ## 2026-06-02 真实 FMA smoke fresh evidence 19:12 checkpoint
2
3 完成项:
4 - 再次检查真实 FMA smoke 运行态,确认 `train.py` elapsed 已推进到 19:12。
5 - 更新 `docs/session-handoff.md``docs/changelist-2026-06-02.md`,同步更晚的 live evidence。
6
7 验证结果:
8 - `ps -p 311629 -o pid,etime,%cpu,%mem,cmd` => `ELAPSED=19:12`
9 - 仍未出现 `build-index/evaluate` 相关新进程
10 - `validate-splits /tmp/fma_real_smoke_stopcheck/fma/manifests` => `ok=true`
11 - `fma_models_smoke/` 仍仅有目录本身
12
13 结论:
14 - 真实 FMA 全量 smoke 仍在 epoch 内推进,没有中断迹象。
15 - 到该时点仍未产生首个模型文件或下游阶段切换证据。
16
1 ## 2026-06-02 真实 FMA smoke fresh evidence 18:22 checkpoint 17 ## 2026-06-02 真实 FMA smoke fresh evidence 18:22 checkpoint
2 18
3 完成项: 19 完成项:
......
...@@ -168,3 +168,11 @@ cd /workspace/acr-engine ...@@ -168,3 +168,11 @@ cd /workspace/acr-engine
168 - 最新 live 证据已推进到:`train.py ELAPSED=18:22` 168 - 最新 live 证据已推进到:`train.py ELAPSED=18:22`
169 - 仍未出现模型文件,也未切换到 `build-index/evaluate` 169 - 仍未出现模型文件,也未切换到 `build-index/evaluate`
170 - manifest 复核继续通过,统计保持不变。 170 - manifest 复核继续通过,统计保持不变。
171
172
173 ## 12:16 UTC 时间推进补充
174
175 - 最新 live 证据已推进到:`train.py ELAPSED=19:12`
176 - 当前 CPU / 内存观测:`%CPU≈614`, `%MEM≈10.6`
177 - 仍未出现模型文件,也未切换到 `build-index/evaluate`
178 - manifest 复核继续通过,统计保持不变。
......
...@@ -167,6 +167,28 @@ ...@@ -167,6 +167,28 @@
167 - 当前依旧只是第 1 个 epoch 内部持续推进。 167 - 当前依旧只是第 1 个 epoch 内部持续推进。
168 - 到 12:15 UTC 为止,仍没有首个模型文件或后续检索/评测阶段证据。 168 - 到 12:15 UTC 为止,仍没有首个模型文件或后续检索/评测阶段证据。
169 169
170 ### 再次延后的 fresh evidence(2026-06-02 12:16 UTC)
171
172 - 真实 FMA smoke 继续推进到:
173 - `train.py ELAPSED=19:12`
174 - `%CPU≈614`
175 - `%MEM≈10.6`
176 - 当前进程结构仍未发生阶段切换:
177 - `PID=311494``external_adapters.py smoke-local fma ...`
178 - `PID=311629``train.py --data /tmp/fma_real_smoke_stopcheck/fma/manifests ...`
179 - 仍未出现 `build-index` / `evaluate` 相关新进程。
180 - `fma_models_smoke/` 仍只有目录本身,没有模型文件。
181 - manifest 再次复核仍通过:
182 - `ok=true`
183 - `catalog_references=8000`
184 - `train_queries=6401`
185 - `test_queries=1593`
186 - `val_queries=0`
187
188 这说明:
189 - 当前依旧处于第 1 个 epoch 内部的持续训练阶段。
190 - 到 12:16 UTC 为止,仍没有首个模型文件或下游检索/评测阶段证据。
191
170 ### 重启后第一优先级动作 192 ### 重启后第一优先级动作
171 193
172 1. 先检查真实 FMA smoke 是否完成: 194 1. 先检查真实 FMA smoke 是否完成:
......