Viết SQL và xây luồng dữ liệu trên Snowflake
snowflake-development
Hỗ trợ viết SQL Snowflake, dựng luồng xử lý dữ liệu, dùng các hàm AI Cortex, viết Snowpark Python, cấu hình dbt và sửa lỗi Snowflake.
Tải miễn phí. Theo dõi Skilnexa một lần là mở khoá mọi lượt tải trên web.
Nó là gì
Hướng dẫn viết SQL và xây luồng dữ liệu trên Snowflake: Dynamic Tables, Streams và Tasks, hàm Cortex AI, Snowpark Python. Dành cho kỹ sư dữ liệu hoặc lập trình viên; người không biết SQL sẽ khó dùng trực tiếp.
Hoạt động ra sao
AI viết SQL theo quy tắc đặt tên và dấu hai chấm trong thủ tục, chọn Dynamic Table hay Streams và Tasks theo nhu cầu, và cảnh báo lỗi phổ biến như quên bật Task. Đầu ra là đoạn SQL, lệnh cấp quyền và các câu kiểm tra lịch sử pipeline.
Ví dụ ứng dụng
- Tình huống
- Công ty bán lẻ muốn bảng doanh số sạch, cập nhật mỗi 5 phút từ dữ liệu sự kiện thô.
- Bạn đưa vào
- Tên bảng sự kiện thô, các cột cần giữ, kho tính toán transform_wh, và độ trễ 5 phút.
- Bạn nhận được
- Câu lệnh CREATE DYNAMIC TABLE với TARGET_LAG, lệnh cấp quyền và truy vấn kiểm tra làm mới.
Ví dụ minh họa theo quy trình trong tài liệu gốc, chưa phải kết quả thử chạy.
Dùng khi nào
Khi làm việc với kho dữ liệu Snowflake và gặp lỗi truy vấn hoặc cần dựng luồng dữ liệu mới.
Các phần chính trong hướng dẫn
- Khởi động nhanh
- Thông lệ tốt cho SQL
- Dữ liệu bán cấu trúc
- MERGE để cập nhật hoặc thêm
- Luồng dữ liệu
- Dynamic Tables, Streams và Tasks
- Cortex AI
- Cortex Agents
Xem mô tả gốc của tác giả (tiếng Anh)
Use when writing Snowflake SQL, building data pipelines with Dynamic Tables or Streams/Tasks, using Cortex AI functions, creating Cortex Agents, writing Snowpark Python, configuring dbt for Snowflake, or troubleshooting Snowflake errors.
Cùng nhóm Kỹ thuật phần mềm
- Kiểm tra và sửa lỗi truy cập cho người khuyết tậtQuét mã web theo WCAG 2.2 mức A và AA, tự sửa lỗi, kiểm độ tương phản màu, lập báo cáo; chạy được cho React, Vue, Angular, Svelte, HTML.
- Rà soát mã khắt khe qua ba góc nhìnXem lại thay đổi mã bằng ba nhân vật khó tính: kẻ phá hoại, người mới vào và kiểm toán bảo mật; mỗi người phải tìm ra lỗi, kết luận BLOCK, CONCERNS hoặc CLEAN.
- Điều quân đoàn agent làm việc lớn song songTriển khai hai lớp agent song song cho việc lớn như viết lại nhiều tệp, di chuyển hàng loạt, kiểm tra toàn mã nguồn, có an toàn git và kiểm tra trước khi chạy.
- Thiết kế hệ nhiều agent phối hợpChọn kiểu điều phối (giám sát, bầy đàn, dây chuyền), tạo khai báo công cụ cho agent và phân tích nhật ký chạy về chi phí, độ trễ, lỗi.
- Chạy bầy agent xử lý dữ liệu hàng loạtTriển khai nhiều agent phụ xử lý song song các việc dữ liệu như 1000 tài liệu, phân tích bộ dữ liệu, tạo nội dung số lượng lớn; có theo dõi tiến độ và khắc phục lỗi.
- Dựng đội agent cho quy trình kinh doanhHỏi về quy trình công việc rồi tạo cấu hình đội agent gồm vai trò, quyền dùng công cụ, cách liên lạc và quy tắc bàn giao.
Phần giải thích do Skilnexa viết sau khi đọc toàn bộ tài liệu gốc của tác giả và đã đối chiếu lại với nội dung gốc. Chưa phải kết quả thử chạy, nên hãy thử bằng dữ liệu giả trước khi dùng cho việc thật.