V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
itskingname
V2EX  ›  问与答

后端日志突然卡住 4 分钟,然后恢复正常,这种问题应该怎么排查?

  •  
  •   itskingname · 2022-09-22 22:05:11 +08:00 · 582 次点击
    这是一个创建于 728 天前的主题,其中的信息可能已经有所发展或是发生改变。

    使用 Flask 开发的一个网站。用户前端请求了一个接口,2 分钟没有反应,导致网关超时被阻断了。

    后面看日志排查问题,发现 10:34 开始,到 10:38 分这段时间,后端没有任何日志打出。10:34 最后一条日志和 10:38 第一条日志之间只有 8 行纯 Python 代码,没有任何 IO 操作或者 CPU 密集型操作。就是一些简单的变量值判断和赋值。

    Flask 是使用 k8s 部署的。由于日志是连续的,只是卡了 4 分钟,因此不是节点重启。pod 的系统日志正常且连续,说明操作系统应该没有卡住。外部有一个程序每 5 秒请求一次 /health 接口,如果连续 3 次没有响应,就会重启 pod 。现在 pod 没有重启,因此说明 /health 接口应该是正常的。

    求问这种情况下,我应该怎么排查到底是什么原因导致 Flask 卡了 4 分钟?

    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1210 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 23:11 · PVG 07:11 · LAX 16:11 · JFK 19:11
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.