enthought / enthought/distarray

O-16: distarray memory-mapped array functionality (optional)

オープン
#196 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
SBIR-year-2
主要言語
Python
スター
5
フォーク
1
PR マージ指標
30日以内にマージされた PR はありません

説明

Objective: To provide functionality that allows ODIN to use memory-mapped arrays as
the backing store for data.

Relevance: This provides support for users who have large storage capacity on, e.g. a workstation, and cannot fit an entire array in main memory. By allowing the backing store to use memory-mapped arrays, these users can perform distributed computations on arrays larger than can fit in main memory.

Description: The initial implementation of this task will likely build on top of NumPy’s existing memory-mapped array functionality. Based on this initial implementation and input from the distributed array protocol design, refinements will be made accordingly.

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

調査の方向性

この issue では、ファイル、テスト、エントリポイントが指定されていません。まず、ODIN の配列用 backing store の実装を見つけ、NumPy のメモリマップ配列機能を確認してください。ODIN がメインメモリより大きい配列に対する分散計算で、メモリマップ配列を backing store として使用できれば完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
numpy, python
領域
data, distributed-systems
issue の種類
機能追加
難易度
5/5
見積もり時間
1週間以上
活発さ
停滞
明瞭さ
説明が足りない
初心者へのやさしさ
25/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。