airbytehq / airbytehq/airbyte

Support more compressions in S3 Source

オープン
#5,110 コメント 5 件 リアクション 4 件 担当者 0 名 GitHub で見る
area/connectors autoteam connectors/source/s3 connectors/sources-files Icebox lang/python team/connectors-python team/extensibility type/enhancement
主要言語
Python
スター
22.1k
フォーク
5.4k
平均マージ
5時間
マージ済み PR(30日)
671

説明

## Tell us about the problem you're trying to solve
Currently S3 (via abstract files source) only supports gzip and bzip2 compressions.

## Describe the solution you’d like
Build in support for other compression such as:
- Zip
- Lzma
- Xz
- Snappy

This should extend to all supported file formats (where appropriate) and sit within [abstract-files-source](https://github.com/airbytehq/airbyte/tree/master/airbyte-integrations/connectors/source-s3/source_s3/source_files_abstract) so that any new files storage source built on top of this inherits the compression support.

If that link is broken we may have refactored where that code sits and I forgot to update this, comment @ me and I'll fix them!

コントリビューションガイド

コントリビューションガイドを開く

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。