Why Next💻 开发6 分钟
测试一片绿，通知却从来没发出去过一次
往队列里塞任务的代码从上线第一天起就每次都失败。错误被吞掉了，测试靠 mock 一直是绿的。一个冒号悄悄干掉三个功能的故事。
- #后端
- #BullMQ
- #测试
- #mock
- #故障处理
#后端
标签“后端”的文章
- 💻 开发9 分钟
收到了数据库挂了的告警。可数据库从来没挂过
一天之内堆了四条 CRITICAL 告警。504、Prisma P2028、后台 500,还有一条“DATABASE 服务宕机”。我先打开 RDS 指标,结果那 21 小时里 CPU 峰值只有 19.7%,好得很。慢的不是数据库,而是要横跨大西洋二十五次的往返;而那条“宕机”告警,是健康检查自己造出来的。
- #后端
- #故障处理
- #Prisma
- #PostgreSQL
- #可观测性
- 💻 开发6 分钟
「staging 里关掉不就好了」-吵闹的 404 告警,和没被真正修复的问题
staging 每天都会弹出同一条 Google Play 404 告警。把源头关掉,告警确实安静了,但那和修复失败模式是两回事。404 是一种重试也没用的永久性错误,却和 5xx 混在一起被当成可重试对待-这是一次排查的记录。
- #后端
- #重试
- #后台任务
- #故障处理
- #On-Call
- 💻 开发5 分钟
关闭钩子跑了两次-SIGTERM 出现两个主人的那次排查
每次部署,Sentry 都会收到一条 Prisma P2028 错误。本想只是修一下关闭顺序,结果发现 NestJS 的 enableShutdownHooks 和 graceful shutdown 库同时抢占了 SIGTERM,导致关闭钩子每次都被执行了两遍。
- #后端
- #NestJS
- #关闭顺序
- #故障排查
- #BullMQ