GitOpsで全部コード化してたのに。K3sクラスタを作り直したら、Sealed Secretsが一つも復号できなくなった理由
K3sクラスタをGitOpsで再構築したらSealed Secretsが全て復号できない状態に陥った。原因は秘密鍵の扱いにある。障害の仕組みと復旧手順、再発防止の運用設計を解説する。
#disaster-recovery
Articles tagged with "disaster-recovery"
毎晩"Completed"と出ていたVeleroのバックアップ。K3sでリストアしたらPVCが空だった理由
K3s標準のlocal-path-provisionerはCSIスナップショット非対応。Veleroのバックアップが"Completed"でも、障害時のリストアでPVCが空になることがある。原因の切り分けとFile System Backup・リストアドリルによる対策を解説する。
自動etcdスナップショットは毎日取れていた。K3sのリストアが本番障害で動かなかった理由
K3sのetcdスナップショットは正常に取れていたのに、本番障害でリストアが失敗した——トークン管理、S3リストア事故、cluster-resetの落とし穴という3つの実例から、embedded etcdバックアップの本当のリスクを解説する。