apache / apache/doris-streamloader

1.0.3版本不支持导入hive的textfile格式文件

オープン
#39 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
主要言語
Go
スター
36
フォーク
24
PR マージ指標
30日以内にマージされた PR はありません

説明

有大量的hive的textfile格式.gz结尾的文件,使用1.0.3版本导入参数为--header="format:csv?compress_type:gz?column_separator:\t?row_delimiter:\n?strict_mode:false",导入报错read file failed,error message: EOF
但使用stream load的curl方式导入单个文件是可正常导入的

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

調査の方向性

まず、--header パラメータと Hive の .gz テキストファイルを使って 1.0.3 のインポートを再現し、そのパスを動作している stream-load curl パスと比較します。読み取り失敗が EOF を報告する箇所を追跡します。指定されたオプションで圧縮テキストファイルのインポートが成功すれば完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
go
領域
databases
issue の種類
バグ
難易度
3/5
見積もり時間
1〜2日
活発さ
静か
明瞭さ
おおむね明確
初心者へのやさしさ
52/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。