我让他先把手指从回车键上挪开:卡住的任务一重启,案发现场就没了。那天晚上我们俩对着监控曲线看了一个多小时,最后把问题定位到一段被目标站限流的出口 IP。...验证方法是按出口分组统计成功率。把最近一小时的任务按 IP 段(或者隧道出口)拆开,你会发现失败不是均匀分布的,而是集中在某一段。定位到段之后,该熔断熔断,该换段换段,别让任务硬扛。...连接没释放、session 对象一直建、异步任务只提交不回收,表现是内存曲线单调上涨,涨到触发 swap 之后速度出现断崖式下跌——CPU 占用不高,但每一步都慢得离谱,这是典型的 IO 等待特征。...日志在同步写盘,盘满了之后写阻塞,写阻塞导致入库协程卡住,入库卡住导致队列堆积,整个流水线停摆。表象和"被反爬了"一模一样,df -h 一敲就现形。...那次之后,"磁盘剩余空间"被我加进了任务启动前的检查项。环境和下游:最后查,但心里要有最后一类是任务之外的东西:数据库锁表、慢查询堆积、宿主机被其他进程抢走资源、容器网络配置问题。