Điều phối xử lý sự cố hệ thống và rút kinh nghiệm
incident-commander
Khung xử lý sự cố từ phát hiện đến sau sự cố: phân mức nghiêm trọng, dựng lại dòng thời gian, mẫu thông báo cho các bên và báo cáo rút kinh nghiệm theo nhiều phương pháp tìm nguyên nhân.
Tải miễn phí. Theo dõi Skilnexa một lần là mở khoá mọi lượt tải trên web.
Nó là gì
Khung điều phối sự cố về độ sẵn sàng hệ thống (mất dịch vụ, chậm, deploy hỏng): phân loại SEV1 đến SEV4, dựng dòng thời gian, viết báo cáo sau sự cố. Không dùng cho tấn công bảo mật. Dành cho đội vận hành hoặc DevOps.
Hoạt động ra sao
AI phân loại mức độ theo tác động đến người dùng, doanh thu và SLA, rồi đề xuất đội cần huy động, mẫu thông báo nội bộ và cho khách hàng, cùng tần suất cập nhật. Sau khi xong, nó dựng dòng thời gian từ log và sinh báo cáo sau sự cố có phân tích nguyên nhân.
Ví dụ ứng dụng
- Tình huống
- Sau một lần triển khai, app đặt hàng của cửa hàng báo lỗi 500 với khoảng 80% khách, và nhóm chưa biết mức nghiêm trọng.
- Bạn đưa vào
- Mô tả sự cố, tỷ lệ người dùng bị ảnh hưởng và mức tác động kinh doanh.
- Bạn nhận được
- Mức SEV đề xuất, đội cần huy động, mẫu thông báo và sau đó là báo cáo sau sự cố.
Ví dụ minh họa theo quy trình trong tài liệu gốc, chưa phải kết quả thử chạy.
Dùng khi nào
Khi hệ thống sập và nhiều nhóm cần phối hợp, hoặc sau đó cần họp rút kinh nghiệm.
Các phần chính trong hướng dẫn
- Khung xử lý sự cố
- Phân loại mức nghiêm trọng
- Vai trò chỉ huy sự cố
- Mẫu thông báo
- Quản lý các bên liên quan
- Khung tạo sổ tay vận hành
Xem mô tả gốc của tác giả (tiếng Anh)
Comprehensive incident response framework from detection through resolution and post-incident review. Battle-tested SRE/DevOps practices: severity classification, timeline reconstruction, structured post-incident analysis. Use when declaring an incident, coordinating multi-team response during an outage, leading a post-mortem, or setting up on-call practices for a new service.
Chi tiết tính năng
- Automated Severity Classification - Intelligent incident triage based on impact and urgency metrics
- Timeline Reconstruction - Transform scattered logs and events into coherent incident narratives
- Post-Incident Review Generation - Structured PIRs with multiple RCA frameworks
- Communication Templates - Pre-built templates for stakeholder updates and escalations
- Runbook Integration - Generate actionable runbooks from incident patterns
Ví dụ yêu cầu
- Maintain Calm Leadership
- Stay composed under pressure
- Make decisive calls with incomplete information
- Communicate confidence while acknowledging uncertainty
- Document Everything
- All actions taken and their outcomes
Cùng nhóm Kỹ thuật phần mềm
- Kiểm tra và sửa lỗi truy cập cho người khuyết tậtQuét mã web theo WCAG 2.2 mức A và AA, tự sửa lỗi, kiểm độ tương phản màu, lập báo cáo; chạy được cho React, Vue, Angular, Svelte, HTML.
- Rà soát mã khắt khe qua ba góc nhìnXem lại thay đổi mã bằng ba nhân vật khó tính: kẻ phá hoại, người mới vào và kiểm toán bảo mật; mỗi người phải tìm ra lỗi, kết luận BLOCK, CONCERNS hoặc CLEAN.
- Điều quân đoàn agent làm việc lớn song songTriển khai hai lớp agent song song cho việc lớn như viết lại nhiều tệp, di chuyển hàng loạt, kiểm tra toàn mã nguồn, có an toàn git và kiểm tra trước khi chạy.
- Thiết kế hệ nhiều agent phối hợpChọn kiểu điều phối (giám sát, bầy đàn, dây chuyền), tạo khai báo công cụ cho agent và phân tích nhật ký chạy về chi phí, độ trễ, lỗi.
- Chạy bầy agent xử lý dữ liệu hàng loạtTriển khai nhiều agent phụ xử lý song song các việc dữ liệu như 1000 tài liệu, phân tích bộ dữ liệu, tạo nội dung số lượng lớn; có theo dõi tiến độ và khắc phục lỗi.
- Dựng đội agent cho quy trình kinh doanhHỏi về quy trình công việc rồi tạo cấu hình đội agent gồm vai trò, quyền dùng công cụ, cách liên lạc và quy tắc bàn giao.
Phần giải thích do Skilnexa viết sau khi đọc toàn bộ tài liệu gốc của tác giả và đã đối chiếu lại với nội dung gốc. Chưa phải kết quả thử chạy, nên hãy thử bằng dữ liệu giả trước khi dùng cho việc thật.