Thiết kế và tinh chỉnh hệ thống Kafka
kafka-expert
Dựng cụm Kafka, chọn cách chia partition, tối ưu bên gửi/nhận, xử lý luồng với Kafka Streams và xử lý sự cố.
Tải miễn phí. Theo dõi Skilnexa một lần là mở khoá mọi lượt tải trên web.
Nó là gì
Chuyên gia thiết kế và tinh chỉnh hệ thống Kafka: cấu hình cụm, chia partition, xử lý luồng dữ liệu và đảm bảo chịu lỗi. Dành cho kỹ sư hạ tầng dữ liệu.
Hoạt động ra sao
Agent xem tải và kiểu truy cập để chia số partition và hệ số sao chép, rồi đề xuất cấu hình producer và consumer cùng SASL hoặc TLS cho bảo mật. Nó lập kế hoạch giám sát bằng JMX và cảnh báo. Đầu ra là file cấu hình cụm, kế hoạch partition và sổ tay xử lý sự cố.
Ví dụ ứng dụng
- Tình huống
- Công ty thương mại điện tử nhận hàng triệu sự kiện đơn hàng mỗi ngày và các consumer thường bị chậm.
- Bạn đưa vào
- Số lượng sự kiện mỗi giây, kiểu đọc ghi và cấu hình cụm hiện tại.
- Bạn nhận được
- Kế hoạch partition, cấu hình producer idempotent và quy tắc cảnh báo khi cụm có bất thường.
Ví dụ minh họa theo quy trình trong tài liệu gốc, chưa phải kết quả thử chạy.
Dùng khi nào
Khi hệ thống truyền tin Kafka bị chậm hoặc nghẽn.
Các phần chính trong hướng dẫn
- Lĩnh vực trọng tâm
- Cách tiếp cận
- Danh sách kiểm chất lượng
- Kết quả đầu ra
Xem mô tả gốc của tác giả (tiếng Anh)
Write highly efficient, scalable, and fault-tolerant Kafka architectures. Handles Kafka stream processing, cluster setup, and performance optimization. Use PROACTIVELY for Kafka architecture design, troubleshooting, or improving Kafka performance.
Chi tiết tính năng
- Kafka cluster setup and configuration
- Partitioning strategy for scalability
- Producer and consumer optimization
- Kafka Streams and real-time processing
- Handling offsets and consumer group coordination
- Fault-tolerance and high availability
- Data retention and compaction strategies
- Security (encryption, authentication, authorization)
Cùng nhóm Kỹ thuật phần mềm
- Chuyên gia viết web bằng Actix (ngôn ngữ Rust)Hỗ trợ viết ứng dụng web hiệu năng cao bằng Actix trên ngôn ngữ Rust: máy chủ HTTP, lập trình bất đồng bộ, mô hình actor và các lớp xử lý trung gian.
- Tìm và cài đặt agent Claude Code từ kho mẫuLiệt kê nhóm agent, tìm theo tên hoặc mô tả và cài agent từ kho awesome-claude-code-subagents trên GitHub vào máy bạn.
- Chuyên gia lập trình ứng dụng AndroidHỗ trợ viết ứng dụng Android hiện đại bằng Kotlin hoặc Java, dùng thư viện Jetpack, tối ưu tốc độ và bộ nhớ, giữ cấu trúc ứng dụng vững.
- Kiến trúc ứng dụng Angular quy mô lớnThiết kế ứng dụng Angular 15+ cho doanh nghiệp: quản lý trạng thái phức tạp, tối ưu RxJS, chia micro-frontend (giao diện ghép từ nhiều phần độc lập), xử lý hiệu năng.
- Viết mã Angular đúng chuẩn và nhanhViết mã Angular theo thực hành tốt: chia component, dùng RxJS, quản lý trạng thái bằng NgRx hoặc Akita, dùng Angular CLI, tối ưu hiệu năng.
- Chuyên gia AngularJS bản cũHỗ trợ tối ưu mã AngularJS (phiên bản đời đầu): tổ chức cấu trúc, tăng tốc vòng cập nhật scope, liên kết dữ liệu hai chiều, viết directive và component riêng.
Phần giải thích do Skilnexa viết sau khi đọc toàn bộ tài liệu gốc của tác giả và đã đối chiếu lại với nội dung gốc. Chưa phải kết quả thử chạy, nên hãy thử bằng dữ liệu giả trước khi dùng cho việc thật.