activeloopai / activeloopai/deeplake

[INTEGRATION] with AiStore

オープン
#1,482 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
enhancement
主要言語
C++
スター
9.2k
フォーク
722
PR マージ指標
30日以内にマージされた PR はありません

説明

## 🚨🚨 Feature Request

- [x] Related to an existing https://github.com/activeloopai/examples/pull/15

### Is your feature request related to a problem?

Add integration to [aistore](https://github.com/NVIDIA/aistore) as a storage provider. Boto3 can not work with AiStore.

### If your feature will improve `HUB`

Hub will support Nvidia AiStore as backend storage.

### Description of the possible solution

- [ ] Add a storage provider in https://github.com/activeloopai/Hub/tree/main/hub/core/storage similar to S3, but with [gopen](https://github.com/webdataset/webdataset/blob/0fc4e542680dba94ee8257e9ec10ce5bf82ba8b8/webdataset/gopen.py ) implementation as seen in Webdataset.
- [ ] Add a unit test
- [ ] Make sure examples pull request work perfectly.

Notes
- Boto3 could not work with aistore due to this issue https://github.com/NVIDIA/aistore/blob/master/docs/s3compat.md#boto3-compatibility

コントリビューションガイド

コントリビューションガイドを開く

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。