训练一个基因表达预测模型时,epoch 还没有结束,风扇已经把整个房间的空气搅热了。

等待也是实验的一部分

漫长运行暴露了工程里容易忽略的细节:日志有没有落盘,断点能不能恢复,显存是否缓慢泄漏,结果是否真的写到了正确的目录。

进度条不会因为你盯着它就更快,但它会提醒你,实验正在发生。

下一次开跑前,我会先把监控、断点和小规模 sanity check 写进流程。