apache / apache/datasketches-java

Compress TDigest can generate centroid with NaN mean

Đang mở
#702 4 bình luận 0 reaction 0 người được giao Xem trên GitHub
Ngôn ngữ chính
Java
Star
958
Fork
226
Merge trung bình
3 ngày 9 giờ
Pull request đã merge (30 ngày)
8

Mô tả

See this thread https://github.com/apache/datasketches-rust/pull/23#discussion_r2622754228

Also we don't verify that the centroid mean is not NaN and the weight is not zero (should be positive even?) on deserialization. (Generally we can't assume the data to be deserialized is safe.)

I think the rank/quantile method can return NaN if the calculation result in that. But the stored centroid should not be NaN or else stable sort is unsound?

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Bắt đầu với cuộc thảo luận pull request được liên kết và lần theo các luồng nén và giải tuần tự hóa của TDigest được đề cập trong issue. Xác minh cách các giá trị trung bình và trọng số của centroid được kiểm tra, đồng thời xác nhận rằng các centroid được lưu trữ không thể chứa giá trị trung bình NaN hoặc trọng số không dương, trong khi hành vi rank/quantile vẫn được xử lý riêng.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Công nghệ
java
Lĩnh vực
data
Loại issue
Lỗi
Độ khó
3/5
Thời gian dự kiến
1-2 ngày
Mức độ hoạt động
Sôi nổi
Độ rõ ràng
Khá rõ ràng
Mức phù hợp với người mới
52/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.