AbsaOSS / AbsaOSS/pramen

Allow storing the metastore configuration on Hadoop (HDFS, S3, etc)

オープン
#121 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
enhancement Pramen-Scala
主要言語
Scala
スター
31
フォーク
4
平均マージ
1日 10分
マージ済み PR(30日)
4

説明

## Background
Currently, metastore config is a part of the configuration that is passed to Pramen on 'spark-submit'.

Sometimes it is very helpful to store parts of the configuration in a central location, like Hadoop

## Feature
Add an ability to store metastore or some other parts of configuration in Hadoop.

When Pramen starts it can start the Spark session based on the local configuration, and then load configuration from Hadoop (could be multiple files), and then load it alltogether.

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。