Why Next💻 开发5 分钟
一个桶有两个主人时,最后 apply 的一方获胜
我加了一条 S3 lifecycle 规则,terraform apply 却失败了。原因是同一个桶的 lifecycle 配置被两个资源各自拥有。S3 lifecycle 不是按规则粒度,而是按整个文档粒度生效,最后的赢家会悄悄抹掉对方的规则。
- #基础设施
- #Terraform
- #S3
- #AWS
- #故障处理
#故障处理
标签“故障处理”的文章
- 💻 开发6 分钟
测试一片绿，通知却从来没发出去过一次
往队列里塞任务的代码从上线第一天起就每次都失败。错误被吞掉了，测试靠 mock 一直是绿的。一个冒号悄悄干掉三个功能的故事。
- #后端
- #BullMQ
- #测试
- #mock
- #故障处理
- 💻 开发9 分钟
收到了数据库挂了的告警。可数据库从来没挂过
一天之内堆了四条 CRITICAL 告警。504、Prisma P2028、后台 500,还有一条“DATABASE 服务宕机”。我先打开 RDS 指标,结果那 21 小时里 CPU 峰值只有 19.7%,好得很。慢的不是数据库,而是要横跨大西洋二十五次的往返;而那条“宕机”告警,是健康检查自己造出来的。
- #后端
- #故障处理
- #Prisma
- #PostgreSQL
- #可观测性
- 💻 开发6 分钟
「staging 里关掉不就好了」-吵闹的 404 告警,和没被真正修复的问题
staging 每天都会弹出同一条 Google Play 404 告警。把源头关掉,告警确实安静了,但那和修复失败模式是两回事。404 是一种重试也没用的永久性错误,却和 5xx 混在一起被当成可重试对待-这是一次排查的记录。
- #后端
- #重试
- #后台任务
- #故障处理
- #On-Call