4paradigm / 4paradigm/OpenMLDB
load data from parquet, poor performance for big datasets
Đang mở
batch-engine
bug
high-priority
- Ngôn ngữ chính
- C++
- Star
- 1.7k
- Fork
- 331
- Merge trung bình
- 12 ngày 12 giờ
- Pull request đã merge (30 ngày)
- 1
Mô tả
parquet file is 3.5G, and possibly 35G in memory. load data from parquet into online storage, spark bootstrap the job, starting 30min and fails of OOM.
Hướng dẫn đóng góp
Đánh giá
Issue này chưa được đánh giá.