使用 Flask 开发的一个网站。用户前端请求了一个接口,2 分钟没有反应,导致网关超时被阻断了。
后面看日志排查问题,发现 10:34 开始,到 10:38 分这段时间,后端没有任何日志打出。10:34 最后一条日志和 10:38 第一条日志之间只有 8 行纯 Python 代码,没有任何 IO 操作或者 CPU 密集型操作。就是一些简单的变量值判断和赋值。
Flask 是使用 k8s 部署的。由于日志是连续的,只是卡了 4 分钟,因此不是节点重启。pod 的系统日志正常且连续,说明操作系统应该没有卡住。外部有一个程序每 5 秒请求一次 /health 接口,如果连续 3 次没有响应,就会重启 pod 。现在 pod 没有重启,因此说明 /health 接口应该是正常的。
求问这种情况下,我应该怎么排查到底是什么原因导致 Flask 卡了 4 分钟?
1
mmdsun 2022-09-23 12:55:37 +08:00 via iPhone
|