程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
事故复盘 相关技术文章
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
广告投放归零的那一天,AI Agent 在几分钟内找到了问题
编程
广告投放归零的那一天,AI Agent 在几分钟内找到了问题
2026-09-06 03:11:20
真实生产事故故事:广告投放突然全部归零,传统排查方式花了近一小时没找到问题,而AI Agent只用几分钟就定位了根因——一个被意外修改的全局流量开关配置。文章详细记录了事故经过、AI Agent的排查过程(数据趋势分析→配置变更检查→影响范围确认→根因定位)、根因分析、AI Agent在故障排查中的价值(快速关联分析、不受认知偏差影响、持续学习、7x24小时运行),以及改进措施。
AI Agent
故障排查
运维
广告技术
监控
可观测性
事故复盘
DevOps
一个缺失的环境变量如何让我的应用在生产环境崩溃:以及我如何在同一晚失去了 Play Store 测试资格
编程
一个缺失的环境变量如何让我的应用在生产环境崩溃:以及我如何在同一晚失去了 Play Store 测试资格
2026-09-06 02:13:03
开发者分享生产事故:一个缺失的环境变量导致React Native应用在生产环境崩溃,并在同一晚失去Google Play Store测试资格。文章详细记录了事故经过、根本原因分析(技术原因和流程原因),以及七个方面的改进措施:环境变量管理、构建时校验、运行时检查和优雅降级、预发布环境和测试、监控和告警、发布流程规范化、React Native特定建议,并总结了对所有开发者的启示。
环境变量
生产环境
崩溃
React Native
发布流程
监控
DevOps
事故复盘
vLLM 长时运行宕机复盘:自愈 supervisor 误杀 940 次
案例
vLLM 长时运行宕机复盘:自愈 supervisor 误杀 940 次
2026-08-30 21:06:03
复盘一次 vLLM(DeepSeek-V4) 长时运行宕机:根因是超长上下文 decode 单步超时触发 EngineCore fatal 且不自愈,而引入的自愈 supervisor 又因启动宽限设成 180s 误杀正常冷启动进程累计重建 940 次。给出参数与自愈脚本设计教训。
运维
vLLM
事故复盘
自愈
Supervisor
GitHub 8·17 事故复盘:容量失败与重试风暴的连锁反应
案例
GitHub 8·17 事故复盘:容量失败与重试风暴的连锁反应
2026-08-30 21:04:54
复盘 GitHub 2026-08-17 持续 7 小时 47 分钟的大故障:根因是 Istio sidecar 容量触顶、HAProxy 流限制耗尽,恢复期客户端无限重试形成二次风暴。提炼出重试上限、配额与抖动退避等可落地运维规则。
运维
事故复盘
SRE
重试
容量
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
python
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调