Implementasi pemulihan insiden yang kredibel memiliki tujuan yang sempit: menentukan deteksi, kepemilikan, penahanan, komunikasi, pemulihan, verifikasi, dan tindak lanjut. Perlakukan dokumen insiden yang rumit gagal jika tidak ada yang dapat menemukan tindakan aman pertama sebagai masukan desain, bukan kasus khusus untuk didokumentasikan nanti.
Klasifikasikan kegagalan sebelum memilih perbaikan: Pemulihan Insiden
Kegagalan pemulihan insiden dapat berupa penolakan, penundaan, penyelesaian sebagian, tindakan duplikat, pembacaan basi, atau koreksi manual. status tersebut tidak dapat dipertukarkan. Pertama-tama periksa artefak berversi dan status produksi persisten untuk menentukan apakah permintaan asli melewati batas yang tidak dapat diubah. Pesan kesalahan umum tidak cukup bukti untuk coba ulang.
Ikuti operasi hingga interupsi: Pemulihan Insiden
Gunakan kasus berbentuk produksi ini: peluncuran berhenti setelah status berubah tetapi sebelum verifikasi selesai. Tangkap pengidentifikasi operasi, mulai status, upaya transisi, respons eksternal, dan hasil yang terlihat pengguna. Kemudian ulangi permintaannya. Jika upaya kedua dapat menimbulkan efek samping lain, pemulihan memerlukan idempotensi atau rekonsiliasi daripada tombol coba ulang yang lebih menonjol.
Pulihkan dalam urutan aman terkecil: Pemulihan Insiden
Mulailah dengan tindakan paling tidak invasif yang memulihkan status yang dapat dipercaya. Lebih memilih melanjutkan, memutar ulang, merekonsiliasi, atau memberikan kompensasi sebelum pengeditan administrator luas. Pertahankan catatan yang gagal hingga penyebab dan dampaknya bagi pelanggan dipahami. Latihan yang menentukan adalah apakah tim dapat menjalankan skenario singkat dari keadaan siaga hingga layanan yang dipulihkan dan garis waktu tertulis.
Amati hasil yang dialami pengguna: Pemulihan Insiden
status infrastruktur dapat terlihat normal sementara dokumen insiden yang rumit gagal jika tidak ada yang dapat menemukan tindakan aman pertama. Hubungkan hasil yang terlihat oleh pengguna dengan rilis, ketergantungan, dan transisi status yang memengaruhinya. Lacak tingkat perubahan yang gagal dan waktu pemulihan; peringatan tanpa pemilik dan tindakan aman hanyalah kebisingan.
Peta keputusan: Pemulihan Insiden
- Deteksi. Sebutkan pemiliknya, catatan resmi, status yang diharapkan, dan respons saat ditolak untuk bagian pemulihan insiden ini.
- Kepemilikan. Dokumentasikan transisi normal, satu transisi terputus, dan pemulihan aman terkecil.
- Penahanan. Lampirkan tes yang dapat direproduksi, tanggal hasil, dan peninjau yang menerima risiko yang tersisa.
- Komunikasi. status input, output, batas izin, dan kriteria penghentian sebelum menambahkan otomatisasi.
- Bukti penutupan. Catat perilaku tindakan berulang dan bukti mana yang membedakan coba ulang dari duplikasi.
kasus batas: Pemulihan Insiden
- Ketika nilai tercatat untuk deteksi berubah setelah kepemilikan disimpan, sebutkan nilai mana yang menang dan bagaimana status yang hilang direkonsiliasi.
- Jika bukti penahanan tidak tersedia saat permintaan pemulihan insiden sedang berlangsung, pertahankan konteks yang cukup untuk membedakan penolakan dan penyelesaian sebagian.
- Tindakan berulang yang melibatkan komunikasi akan mengembalikan hasil yang ada atau mengekspos kemungkinan efek duplikat sebelum coba ulang.
- Perubahan yang ditolak pada bukti penutupan harus membiarkan status resmi tidak tersentuh dan membuat catatan audit yang tidak mengungkapkan rahasia apa pun.
- Pemulihan harus memulihkan status terkecil yang dapat dipercaya terlebih dahulu, lalu memverifikasi hasil pemulihan insiden yang terlihat terhadap catatan yang disimpan.
Ukur keputusan, bukan aktivitas: Pemulihan Insiden
Lacak tingkat perubahan yang gagal dan cakupan verifikasi. Sebelum mengumpulkan hasil pemulihan insiden, tentukan populasi, lingkungan, rentang waktu, dan pemilik setiap pengukuran. Aktivitas hanya berguna jika aktivitas tersebut memperjelas apakah hasil pemulihan insiden yang dilindungi menjadi lebih aman atau lebih mudah untuk dipulihkan.
Tetapkan ambang batas investigasi untuk pemulihan insiden terlebih dahulu. Tinjauan kegagalan dan pemulihan juga harus menyebutkan respons yang diizinkan, bukti yang diperlukan untuk menyelesaikan masalah, dan tanggal peninjauan berikutnya. Berhenti mengumpulkan data pemulihan insiden ketika tidak lagi membedakan keberhasilan, penolakan, penundaan, duplikasi, atau pemulihan, atau ketika tidak lagi mengubah keputusan.
Sumber dan bukti lokal: Pemulihan Insiden
Referensi utama ini mendokumentasikan perilaku platform yang relevan dengan pemulihan insiden. Untuk pemulihan insiden, referensi tersebut menetapkan terminologi dan batasan; mereka tidak memverifikasi implementasi lokal.
- Mengelola Insiden
- Panduan Perencanaan Kontinjensi untuk Sistem Informasi Federal
- Observability Primer
- Pencadangan dan Pemulihan
Setiap klaim pemulihan insiden yang dapat dipublikasikan masih memerlukan tanggal lokal bukti: konfigurasi, hasil pengujian, tangkapan layar, log, kueri, atau hasil pemulihan dari produk bernama. Tinjauan kegagalan dan pemulihan harus menjelaskan dengan tepat artefak mana yang mendukung setiap klaim penting.
Contoh InMyDraft terkait: Pemulihan Insiden
InMyCompany memberikan contoh lokal batas produk yang dapat diperiksa dan relevan dengan pemulihan insiden. Katalog proyeknya mencatat detail implementasi berikut: Faktur pelanggan dan stok produk terhubung: menandai faktur yang dibayar, memposting penyelesaian ke akun yang benar, dan mengirimkan stok ke faktur memperbarui inventaris.
Perbandingan antara InMyCompany dan pemulihan insiden sengaja dibuat sempit. Ini menunjukkan bagaimana satu produk membuat status dan bukti terlihat; hal ini tidak membuktikan bahwa setiap rekomendasi pemulihan insiden telah dilaksanakan. Gunakan contoh InMyCompany untuk meninjau pemulihan insiden, bukan sebagai pengganti pengujian produk dalam cakupan.
Tinjau daftar periksa: Pemulihan Insiden
- Identifikasi apakah permintaan pemulihan insiden yang gagal ditolak, diterima, ditunda, atau diselesaikan sebagian.
- Pertahankan status terakhir yang dapat dipercaya sebelum mencoba perbaikan.
- Uji pengiriman duplikat dan ketergantungan yang tidak tersedia.
- Gunakan identitas rilis, keluaran migrasi, pemeriksaan kesehatan, jejak, dan latihan pemulihan berwaktu untuk memilih pemulihan aman terkecil.
- Ubah kegagalan yang diamati menjadi uji regresi atau kasus runbook yang dikelola.
Keputusan pemulihan insiden siap untuk tahap berikutnya ketika orang lain yang bertanggung jawab dapat mereproduksi bukti, menjelaskan batas kegagalan, dan melakukan pemulihan tanpa bergantung pada ingatan penulis asli.
