SSkilnexa
SkillGiáo dụcHợp với: Kỹ sư vận hànhMức: Kỹ thuật

Thử cố ý gây lỗi để kiểm tra độ bền hệ thống

chaos-engineering

Lập kế hoạch thí nghiệm gây lỗi có kiểm soát, tính phạm vi ảnh hưởng, tạo báo cáo sau sự cố. Có công cụ Python và lệnh /chaos-experiment.

Tải miễn phí. Theo dõi Skilnexa một lần là mở khoá mọi lượt tải trên web.

Nút theo dõi đang được chuẩn bị.
Link tải đang được chuẩn bị.

Nó là gì

Dành cho kỹ sư vận hành và SRE: thiết kế, chạy và rút kinh nghiệm thí nghiệm chaos (cố tình gây lỗi có kiểm soát) như chậm mạng hoặc mất một máy chủ. Luôn đặt tiêu chí dừng trước khi chạy.

Hoạt động ra sao

Bạn mô tả hệ thống và giả thuyết. Skill tính bán kính ảnh hưởng (GREEN, YELLOW, RED) trước khi chạy, sinh kế hoạch thí nghiệm có tiêu chí dừng, rồi sau khi chạy dựng bản rút kinh nghiệm không đổ lỗi. Nếu chạm tiêu chí dừng thì dừng ngay và ghi lại chuyện đã xảy ra.

Ví dụ ứng dụng

Tình huống
Dịch vụ thanh toán của cửa hàng online muốn biết điều gì xảy ra nếu một dịch vụ phụ chậm thêm 200 ms trong giờ cao điểm.
Bạn đưa vào
Dịch vụ checkout-svc, giả thuyết p99 dưới 500 ms, chậm thêm 200 ms, 5% lưu lượng trong 15 phút.
Bạn nhận được
Kế hoạch có tiêu chí dừng (p99 trên 1000 ms), nhóm bán kính GREEN hoặc YELLOW, và đề xuất PROCEED, REDUCE hoặc ABORT.

Ví dụ minh họa theo quy trình trong tài liệu gốc, chưa phải kết quả thử chạy.

Dùng khi nào

Khi muốn xem hệ thống còn chạy không nếu một máy chủ hỏng, trước khi sự cố thật xảy ra.

Các phần chính trong hướng dẫn

  1. Biết khi nào nên và không nên dùng
  2. Đặt tiêu chí dừng thí nghiệm
  3. Thiết kế thí nghiệm
  4. Tính phạm vi ảnh hưởng
  5. Viết báo cáo sau thí nghiệm
  6. Chọn công cụ phù hợp
  7. Tổ chức ngày diễn tập
Xem mô tả gốc của tác giả (tiếng Anh)

Use when planning, running, or learning from chaos engineering experiments. Triggers on "chaos experiment", "fault injection", "gameday", "resilience test", "blast radius", "steady state", "abort criteria", "Chaos Toolkit", "Chaos Mesh", "Litmus", "Gremlin", "AWS FIS", or any deliberate failure-injection question. Ships experiment designer, blast-radius calculator, and postmortem generator (all stdlib Python), 4 references on chaos principles + experiment design + attack taxonomy + tooling landscape, and a /chaos-experiment slash command. Composes with feature-flags-architect (kill switches as abort triggers) and kubernetes-operator (common chaos targets).

Ví dụ yêu cầu

  • Planning a chaos experiment (what to break, where, when, how to abort)
  • Calculating blast radius before running the experiment
  • Reviewing an existing experiment plan for safety
  • Choosing a chaos tool (Chaos Toolkit / Chaos Mesh / Litmus / Gremlin / AWS FIS)
  • Writing a chaos experiment postmortem
  • Running a Game Day exercise

Cùng nhóm Giáo dục

Phần giải thích do Skilnexa viết sau khi đọc toàn bộ tài liệu gốc của tác giả và đã đối chiếu lại với nội dung gốc. Chưa phải kết quả thử chạy, nên hãy thử bằng dữ liệu giả trước khi dùng cho việc thật.