sassoftware / sassoftware/python-sasctl
Model' statistics not visible in SAS Viya Model Manager Compare section
Chưa có ai nhận issue này.
- Ngôn ngữ chính
- Python
- Star
- 52
- Fork
- 45
- Merge trung bình
- 23 giờ 38 phút
- Pull request đã merge (30 ngày)
- 2
Mô tả
Describe the issue
When using the calculate_model_statistics function, the generated file dmcas_fitstat.json, in the "Data" section of the json, contains float/integer values for any statistics instead of string values.
Importing this file in SAS Model Manager results in "NaN" values when comparing this model to another.
See the screenshot below.
Wrapping these values in quoted strings corrects the issue.
Attaching the dmcas_fitstat.json file where the training values where manually wrapped as strings (correctly displayed in SAS Model Manager) and the validate/testing ones are originals from the sasctl function.
dmcas_fitstat.json
To Reproduce
Use the function calculate_model_statistics with any dataset and import that file to a model's files section in SAS Model Manager
Expected behavior
The Compare Section in SAS Model Manager should display the model's statistics values, not NaN.
Version
sasctl==1.10.6
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Hướng nghiên cứu
Bắt đầu từ calculate_model_statistics và kiểm tra cách dmcas_fitstat.json được tuần tự hóa, sau đó tái hiện vấn đề với một tập dữ liệu và nhập tệp vào SAS Model Manager. Công việc được xem là hoàn tất khi phần Data chứa các giá trị được SAS Model Manager chấp nhận và phần Compare hiển thị các thống kê thay vì NaN.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- python
- Lĩnh vực
- api, machine-learning
- Loại issue
- Lỗi
- Độ khó
- 3/5
- Thời gian dự kiến
- 1-2 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 45/100