calico のデプロイをミスって本番クラスタを壊しそうになった話

calico をアプデするつもりが、マニフェストを間違えていたせいで特定のリソースがGCされず etcdのデータが肥大化していき、クラスタが操作不能になりそうになった話をします