apache / apache/doris-streamloader
1.0.3版本不支持导入hive的textfile格式文件
オープン
- 主要言語
- Go
- スター
- 36
- フォーク
- 24
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
有大量的hive的textfile格式.gz结尾的文件,使用1.0.3版本导入参数为--header="format:csv?compress_type:gz?column_separator:\t?row_delimiter:\n?strict_mode:false",导入报错read file failed,error message: EOF
但使用stream load的curl方式导入单个文件是可正常导入的
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
まず、--header パラメータと Hive の .gz テキストファイルを使って 1.0.3 のインポートを再現し、そのパスを動作している stream-load curl パスと比較します。読み取り失敗が EOF を報告する箇所を追跡します。指定されたオプションで圧縮テキストファイルのインポートが成功すれば完了です。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- go
- 領域
- databases
- issue の種類
- バグ
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 活発さ
- 静か
- 明瞭さ
- おおむね明確
- 初心者へのやさしさ
- 52/100