Dữ liệu thanh lý: kiểm tra một sự kiện thực sự đo điều gì · 4 / 5
Loại lần xử lý thanh lý lặp đã chứng minh mà không xóa quan sát thật
Kết nối lại hoặc chạy lại tác vụ có thể làm biểu đồ thanh lý tăng hai lần vì một quan sát đã lưu. Xóa mọi hàng trùng timestamp, phía, lượng và giá chưa phải giải pháp đầy đủ: những sự kiện khác nhau thực sự có thể cùng các trường đó. Cần hỏi nguồn gốc dữ liệu chứng minh được loại lặp nào. Bằng chứng xử lý lặp cục bộ và danh tính sự kiện nhà cung cấp giải quyết hai vấn đề khác nhau.
Athenum8 phútCập nhật:
Tách ba loại danh tính
Mã truyền tải hoặc lưu trữ có thể xác lập rằng hệ thống của bạn xử lý cùng thông điệp đã lưu hai lần. Mã sự kiện nhà cung cấp có thể xác lập hai lần gửi thuộc một sự kiện, nếu phạm vi và tính ổn định được tài liệu hỗ trợ. Dấu vân tay từ các giá trị thông thường chỉ chứng minh các giá trị trùng nhau. Nó không tự động là mã sự kiện.
Những lược đồ thanh lý công khai được dẫn ở đây không cung cấp mã tài khoản chung hoặc mã lần khớp duy nhất ổn định cho mọi quan sát. Không tự tạo danh tính ấy từ ID yêu cầu đăng ký hay timestamp. Ghi mức tin cậy của quy tắc khử trùng, giữ đầu vào gốc và phân biệt lần xử lý lặp đã loại với các quan sát cùng giá trị chưa giải quyết được.
Giữ lịch sử chỉnh sửa
Với tổng phục vụ nghiên cứu, giữ số lần xử lý ban đầu, lượng lặp đã chứng minh, tổng cục bộ đã sửa và các trường hợp chưa rõ. Nếu một quy tắc phỏng đoán thay đổi tổng, nêu quy tắc và tác động. Con số gọn gàng không đáng tin hơn chỉ vì bất định bị giấu. Cập nhật trễ, trạng thái lệnh tích lũy và dữ liệu nguồn sửa đổi cũng cần ngữ nghĩa riêng; không thể coi tất cả là bản sao y hệt.
Hai mươi đơn vị xử lý còn mười lăm sau một lần lặp đã chứng minh
Trong kho lưu trữ giả định, phân vùng và offset kết hợp xác định một thông điệp bất biến. P0:41 có hai hàng lượng 2 và 3; tác vụ xử lý cùng thông điệp đó hai lần. P0:42 có một hàng lượng 5. P0:43 có hàng lượng 5 khác với trường công khai giống hệt, nhưng không có mã sự kiện nhà cung cấp. Hai thông điệp sau là quan sát lưu riêng. Trong ví dụ mọi lượng là phần tăng mới và cùng đơn vị cơ sở.
Cộng theo mọi lần xử lý cho 5 + 5 + 5 + 5 = 20. Lần đọc lại P0:41 được chứng minh bởi danh tính lưu trữ, nên bỏ phần đóng góp năm đơn vị thứ hai: tổng mỗi thông điệp một lần là 15. Sự giống nhau của P0:42 và P0:43 không xác định đó là một sự kiện gửi hai lần hay hai sự kiện khác nhau. Nếu cùng sự kiện, lượng nền là 10; nếu khác, là 15. Hai khả năng chỉ mô tả sổ giả định khép kín này, không phải giới hạn của toàn thị trường.
| Lần xử lý | Thông điệp đã lưu | Lượng | Cách xử lý theo bằng chứng |
|---|---|---|---|
| 1 | P0:41 | 2 + 3 = 5 | Giữ lần xử lý cục bộ đầu |
| 2 | P0:41 | 2 + 3 = 5 | Loại lần lặp đã chứng minh |
| 3 | P0:42 | 5 | Giữ; danh tính nhà cung cấp chưa rõ |
| 4 | P0:43 | 5 | Giữ; trùng trường không chứng minh danh tính |
Phóng to sơ đồ- Tổng mọi lần xử lý: 20 đơn vị cơ sở
- Phần lặp đã chứng minh: 5 đơn vị cơ sở
- Mỗi thông điệp đếm một lần: 15 đơn vị cơ sở
- Nếu hai hàng bằng nhau là một sự kiện: 10 đơn vị cơ sở
Offset cục bộ chỉ chứng minh danh tính cục bộ
Hai offset khác nhau chứng minh hai bản ghi lưu trữ, không nhất thiết hai sự kiện sàn duy nhất. Ngược lại, băm nội dung có thể gộp hai sự kiện khác nhau tình cờ có trường công khai giống nhau. Giữ đủ ngữ cảnh để giải thích cả hai giới hạn. Nếu bằng chứng độc lập sau này giải quyết hai bản ghi cuối, sửa thống kê kèm ngày thay vì âm thầm đổi đầu vào lịch sử của nghiên cứu.
Trước khi quyết định
- Tách danh tính lưu trữ khỏi danh tính sự kiện nhà cung cấp.
- Chỉ loại lần lặp được bằng chứng đã chọn xác lập.
- Giữ trường gốc và quy tắc chỉnh sửa đã dùng.
- Giữ bất định cho quan sát bằng nhau khi thiếu danh tính.
- Báo tổng ban đầu, phần sửa và bất định còn lại.
Kiểm tra kiến thức
Đối chiếu đáng tin sau đó xác nhận P0:42 và P0:43 mô tả cùng sự kiện. Lượng cuối cùng trong sổ giả định là bao nhiêu và tổng 20 ban đầu bị thổi phồng bao nhiêu?
Xem đáp án và giải thích
Lượng cuối là 10: năm từ P0:41 và năm từ sự kiện phía sau duy nhất. Tổng ban đầu vượt số đã sửa 10 đơn vị, tức 100% của tổng đúng 10. Điều này chỉ giải quyết sổ giả định, không chứng minh bao phủ đầy đủ sàn.