https://blog.tanteng.space/tags/chaos-engineering/Recent content in 混沌工程 on Tony老师的博客HugozhFri, 08 Apr 2022 11:00:00 +0800https://blog.tanteng.space/2022/04/chaos-engineering-practice/Fri, 08 Apr 2022 11:00:00 +0800https://blog.tanteng.space/2022/04/chaos-engineering-practice/<p>2021 年双十一凌晨 1 点，我们一个核心订单服务因为 Redis 抖动雪崩了 17 分钟。事后复盘：监控告警是有的，但&quot;Redis 主从切换 + 客户端超时 + 下游线程池打满&quot;这条故障链，从没在生产演练过。次年我们启动了混沌工程专项 —— 不是为了&quot;搞破坏&quot;，而是为了让&quot;故障响应&quot;变成肌肉记忆。</p> <p>混沌工程不是故障注入工具的堆砌。它是一套围绕&quot;假设 → 实验 → 学习 → 改进&quot;的工程方法论，过去十年从 Netflix 的&quot;野蛮猴子&quot;演化为云原生的精细化平台。本文梳理这条演进线，并给出 K8s 时代落地 Chaos Mesh 的实战经验。</p>