enthought / enthought/distarray
O-16: distarray memory-mapped array functionality (optional)
- 主要言語
- Python
- スター
- 5
- フォーク
- 1
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
Objective: To provide functionality that allows ODIN to use memory-mapped arrays as
the backing store for data.
Relevance: This provides support for users who have large storage capacity on, e.g. a workstation, and cannot fit an entire array in main memory. By allowing the backing store to use memory-mapped arrays, these users can perform distributed computations on arrays larger than can fit in main memory.
Description: The initial implementation of this task will likely build on top of NumPy’s existing memory-mapped array functionality. Based on this initial implementation and input from the distributed array protocol design, refinements will be made accordingly.
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
この issue では、ファイル、テスト、エントリポイントが指定されていません。まず、ODIN の配列用 backing store の実装を見つけ、NumPy のメモリマップ配列機能を確認してください。ODIN がメインメモリより大きい配列に対する分散計算で、メモリマップ配列を backing store として使用できれば完了です。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- numpy, python
- 領域
- data, distributed-systems
- issue の種類
- 機能追加
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 活発さ
- 停滞
- 明瞭さ
- 説明が足りない
- 初心者へのやさしさ
- 25/100