Filtering dictionary data types using dplyr in Arrow package
- 主要言語
- Java
- スター
- 3.1k
- フォーク
- 1.6k
- 平均マージ
- 3日 12時間
- マージ済み PR(30日)
- 33
説明
Is there any way where we can filter the dictionary data types using dplyr. Below is the example for illustration
test %>% dplyr::filter(cols %in% c("A","B","C") %>collect(). It gives me following error
Error in dataset___Scanner__ToTable(self) : NotImplemented: Function is_in has no kernel matching input types (array[dictionary])
Here cols is dictionary type value
**Reporter**: [Soumya Ranjan Prusty](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=prustys)
**Note**: *This issue was originally created as [PARQUET-1962](https://issues.apache.org/jira/browse/PARQUET-1962). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
まず、dictionary 型の cols 値を使用した dplyr のフィルター例を再現し、対応する is_in カーネルがないと報告する Arrow の処理を調査します。指定された値で dictionary データ型のフィルタリングが NotImplemented エラーなしに完了すれば完了です。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- r
- 領域
- data
- issue の種類
- バグ
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 活発さ
- 停滞
- 明瞭さ
- 説明が足りない
- 初心者へのやさしさ
- 25/100