Data Observability
Data Observability theo dõi “sức khỏe vận hành” của dữ liệu — không phải đúng/sai theo quy tắc nghiệp vụ, mà là dữ liệu có được cập nhật đều, đúng cấu trúc và đủ khối lượng không.
Ba tín hiệu cốt lõi
Phần tiêu đề “Ba tín hiệu cốt lõi”- Độ tươi (freshness): dữ liệu có được cập nhật đúng nhịp mong đợi không? Trễ cập nhật là dấu hiệu pipeline gặp vấn đề.
- Thay đổi lược đồ (schema change): cột bị thêm/xóa/đổi kiểu — có thể làm hỏng báo cáo/hệ thống hạ nguồn.
- Khối lượng bản ghi (volume): số bản ghi tăng/giảm đột biến so với thường lệ.
Khác gì với Data Quality
Phần tiêu đề “Khác gì với Data Quality”| Data Quality | Observability | |
|---|---|---|
| Câu hỏi | Dữ liệu đúng/hợp lệ không? | Dữ liệu được nạp đều & đúng cấu trúc không? |
| Ví dụ | Email sai định dạng | Bảng chưa cập nhật 2 ngày; thêm cột lạ |
Hai cái bổ sung cho nhau: một bảng “đúng quy tắc” nhưng không được cập nhật vẫn là vấn đề.
Vì sao quan trọng
Phần tiêu đề “Vì sao quan trọng”- Phát hiện sự cố pipeline sớm trước khi người dùng phàn nàn.
- Bảo vệ báo cáo/quyết định khỏi dữ liệu cũ hoặc lệch cấu trúc.