apache / apache/doris-streamloader

1.0.3版本不支持导入hive的textfile格式文件

Đang mở
#39 0 bình luận 0 reaction 0 người được giao Xem trên GitHub
Ngôn ngữ chính
Go
Star
36
Fork
24
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Mô tả

有大量的hive的textfile格式.gz结尾的文件,使用1.0.3版本导入参数为--header="format:csv?compress_type:gz?column_separator:\t?row_delimiter:\n?strict_mode:false",导入报错read file failed,error message: EOF
但使用stream load的curl方式导入单个文件是可正常导入的

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Bắt đầu bằng cách tái hiện thao tác import 1.0.3 với các tham số --header và một tệp văn bản Hive dạng .gz, sau đó so sánh đường đi đó với đường đi curl stream-load đang hoạt động. Theo dõi báo cáo lỗi đọc EOF; hoàn tất khi việc import tệp văn bản đã nén thành công với các tùy chọn đã nêu.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Công nghệ
go
Lĩnh vực
databases
Loại issue
Lỗi
Độ khó
3/5
Thời gian dự kiến
1-2 ngày
Mức độ hoạt động
Ít trao đổi
Độ rõ ràng
Khá rõ ràng
Mức phù hợp với người mới
52/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.