aws / aws/amazon-redshift-python-driver
Missing support for PyArrow types in Pandas dataframes
Đang mở
- Ngôn ngữ chính
- Python
- Star
- 220
- Fork
- 86
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Mô tả
Most of the data ingestion utilities (`pd.read_csv`, `pd.read_parquet`, `pd.read_sql`) since Pandas 2.2 include a `dtype_backend='pyarrow'` option to use PyArrow types instead of NumPy backend.
It would be awesome if there was support for this.
Hướng dẫn đóng góp
Hướng nghiên cứu
Issue đề cập đến pd.read_csv, pd.read_parquet và pd.read_sql nhưng không có tệp hoặc bài kiểm thử nào trong repository. Trước tiên, hãy xác định các đường dẫn nhập dữ liệu tạo ra các dataframe của Pandas và kiểm tra cách xử lý dtype hiện tại; thiết lập mức độ bao phủ cho dtype_backend='pyarrow', sau đó xác minh rằng cả ba đường dẫn nhập dữ liệu đều xử lý được các dataframe dựa trên PyArrow.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- pandas, python
- Lĩnh vực
- data
- Loại issue
- Tính năng
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Cần làm rõ
- Mức phù hợp với người mới
- 30/100