Angel-ML / Angel-ML/angel

[Feature needed] parquet-format reader for HDFS

未關閉
#864 0 則留言 0 個 reaction 已指派 0 人 在 GitHub 檢視
主要語言
Java
星號
6.8k
分支
1.6k
平均合併
44 分鐘
30 天內合併 PR
1

描述

## Background

We have notice that if we only use raw angel (not spark-on-angel), we can only choose to read a single text file as input. If the input data source is large (> 1G), we may need to store the data as parquet format in HDFS. Maybe it's a good idea to implement a parquet-format reader for raw angel.

## Suggestion:

add a option `parquet` for param `angel.input.format` , and implement it in the same directory of BalanceInputFormat.java

貢獻指南

開啟貢獻指南

評估

這個 Issue 還沒有評估資料。

把新 issue 寄到你的電子郵件信箱

精選適合新手參與的 GitHub issue 摘要。