AbsaOSS/pramen

在 GitHub 查看

Resilient data pipeline framework running on Apache Spark

星标: 31
派生: 4
开放的新手 issue: 0
已索引 issue: 38
平均合并: 1 天 10 分钟
30 天内合并 PR: 4

主要语言: Scala
许可证: Apache-2.0
最近 GitHub push: 2026年9月7日
最近索引: 2026年9月13日
贡献指南: 没有贡献指南
行为准则: 没有行为准则
新手标签: help wanted

未关闭全部

目前已索引 38 个未关闭的 Issue

Allow specifying Spark resources per Python-Py Transformer 未关闭

enhancement help wanted Pramen-Py

AbsaOSS/pramen#36 · 0 条评论 · 1 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
move from poetry to pdm 未关闭

Pramen-Py

AbsaOSS/pramen#41 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Fail the full pipeline on certain types of exceptions 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#87 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Make sure CI/CD includes Python 3.6 未关闭

bug CI/CD

AbsaOSS/pramen#89 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Maximum days late data load 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#120 · 0 条评论 · 1 个 reaction · 已指派 1 人 · 索引于 2026年9月13日
Allow storing the metastore configuration on Hadoop (HDFS, S3, etc) 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#121 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add a metastore method that returns all available tables 未关闭

enhancement Pramen-Py Pramen-Scala

AbsaOSS/pramen#133 · 1 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Test coverage changes tracking 未关闭

question

AbsaOSS/pramen#144 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Some tests are in the 'tests' package where package private functions cannot be tested 未关闭

bug

AbsaOSS/pramen#157 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Allow sources to be configured as 'always have data' 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#184 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Remove security vulnerabilities if possible 未关闭

DE DS enhancement

AbsaOSS/pramen#215 · 2 条评论 · 0 个 reaction · 已指派 1 人 · 索引于 2026年9月13日
Stateful data checks for ingestion and other types of jobs 未关闭

DE DS enhancement Pramen-Scala

AbsaOSS/pramen#220 · 2 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Improve error messages for EnceladusSink errors 未关闭

DE enhancement Pramen-Scala

AbsaOSS/pramen#240 · 0 条评论 · 0 个 reaction · 已指派 1 人 · 索引于 2026年9月13日
Add an option to not track late data for a table 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#282 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Pramen pipelines sometimes hang when parallel.tasks > 1 未关闭

bug might be fixed already Pramen-Scala

AbsaOSS/pramen#302 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add 'pramen-test' artifact that contains fixtures for testing Pramen components 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#335 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Calculate and log stability metric for each operation 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#337 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add a mode for initial ingestion of event data 未关闭

DE enhancement Pramen-Scala

AbsaOSS/pramen#350 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add an ability to format info date and insert date expression into JDBC SQL queries 未关闭

DS enhancement Pramen-Scala

AbsaOSS/pramen#360 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Create a CDC transformer 未关闭

DE enhancement Pramen-Scala

AbsaOSS/pramen#365 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Improve unit test coverage of ResultSetToRowIterator.scala 未关闭

enhancement Pramen-Scala Refactoring

AbsaOSS/pramen#379 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
A Hive table fails to load if a custom schema is used. 未关闭

bug DS Pramen-Scala

AbsaOSS/pramen#398 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add the ability to have metastore partitioning column as a string, not a date 未关闭

DS enhancement Pramen-Scala

AbsaOSS/pramen#424 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Make embedded MongoDb tests runnable on MacOs/AppleSilicon and Windows 未关闭

enhancement Pramen-Scala

AbsaOSS/pramen#435 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add a way to route different issues to different email lists 未关闭

DE enhancement Pramen-Scala

AbsaOSS/pramen#481 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Include tenant name in email notifications, if defined 未关闭

arguable enhancement

AbsaOSS/pramen#505 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Remove the limit of the incremental ingestion of files so that files can arrive out of order 未关闭

enhancement

AbsaOSS/pramen#522 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Allow sinks not to have input tables, only table dependencies 未关闭

arguable enhancement

AbsaOSS/pramen#525 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Make sure `disable.count.query = true` does not change the behavior of ingestion 未关闭

arguable enhancement

AbsaOSS/pramen#539 · 1 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Migrate to the new SonaType platform 未关闭

enhancement

AbsaOSS/pramen#618 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Consolidate bookkeeping entries for incremental jobs 未关闭

enhancement

AbsaOSS/pramen#651 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Update Spark in PySpark to use newer Spark stubs 未关闭

enhancement

AbsaOSS/pramen#653 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add ability to track number of records deviation and report it as warnings in email notifications 未关闭

enhancement

AbsaOSS/pramen#729 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add timeout based on expected execution time of JDBC ingestion 未关闭

enhancement

AbsaOSS/pramen#732 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Adopt Java Method Filtration JaCoCo Extension 未关闭

enhancement

AbsaOSS/pramen#740 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Jdbc Count doesn't use additional options from JDBC config 未关闭

bug

AbsaOSS/pramen#758 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add a parallelism mode that allows parallel job runs but never the same job for different info dates 未关闭

enhancement

AbsaOSS/pramen#759 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日
Add support for automatic repartitioning in bulk history load mode 未关闭

enhancement

AbsaOSS/pramen#791 · 0 条评论 · 0 个 reaction · 已指派 0 人 · 索引于 2026年9月13日

AbsaOSS/pramen

把新 issue 发到你的邮箱