Kiểm tra ETL - Nhiệm vụ
Kiểm tra ETL được thực hiện trước khi dữ liệu được chuyển vào hệ thống kho dữ liệu sản xuất. Nó đôi khi còn được gọi làtable balancing hoặc là production reconciliation. Nó khác với kiểm thử cơ sở dữ liệu về phạm vi và các bước cần thực hiện để hoàn thành việc này.
Mục tiêu chính của kiểm tra ETL là xác định và giảm thiểu các lỗi dữ liệu và các lỗi chung xảy ra trước khi xử lý dữ liệu để báo cáo phân tích.
Kiểm tra ETL - Các công việc cần thực hiện
Dưới đây là danh sách các nhiệm vụ phổ biến liên quan đến Kiểm tra ETL -
- Hiểu dữ liệu được sử dụng để báo cáo
- Xem lại Mô hình Dữ liệu
- Nguồn để ánh xạ mục tiêu
- Kiểm tra dữ liệu trên dữ liệu nguồn
- Gói và xác thực lược đồ
- Xác minh dữ liệu trong hệ thống đích
- Xác minh các phép tính chuyển đổi dữ liệu và các quy tắc tổng hợp
- So sánh dữ liệu mẫu giữa nguồn và hệ thống đích
- Kiểm tra chất lượng và toàn vẹn dữ liệu trong hệ thống đích
- Kiểm tra hiệu suất trên dữ liệu