apache / apache/iceberg-python

Support rewrite_manifests table maintenance

未關閉
#3,629 0 則留言 0 個 reaction 已指派 0 人 在 GitHub 檢視

還沒有人認領這個 Issue。

主要語言
Python
星號
1.1k
分支
588
平均合併
1 天 23 小時
30 天內合併 PR
84

描述

Feature Request / Improvement

Rewriting manifests without changing data speeds up scan planning when a table has accumulated many small manifests. Java exposes this as Table.rewriteManifests() (Spark: rewrite_manifests).

Scope: an explicit maintenance operation that reads the current snapshot's manifests, regroups entries, rewrites them preserving sequence numbers (entries rewritten as EXISTING) and, for V3, first_row_id, and commits a replace snapshot. Related: #270 tracks automatic manifest merging on write; this covers the explicit maintenance API.

貢獻指南

這個儲存庫沒有索引到貢獻指南

從這裡開始

  1. 先讀完整個 Issue,再讀專案的貢獻指南。
  2. 在 Issue 下留言說明你要接手 —— 這能避免兩個人做同樣的事。
  3. Fork 儲存庫,在一個分支上完成修改。
  4. 送出 Pull Request,並在描述裡引用這個 Issue 編號。

研究方向

找出與 Table.rewriteManifests() 對應的 Python 資料表維護/API 入口點;先閱讀目前的快照與資訊清單管理路徑。完成的標準是:有一個明確的操作重新分組目前的資訊清單、保留序號與 V3 first_row_id、將重寫後的項目标記為 EXISTING,並提交一個替換快照。

由索引模型根據 Issue 內容生成。

評估

技術堆疊
python
領域
databases
Issue 類型
功能
難度
5/5
預估耗時
一週以上
活躍度
冷清
描述清晰度
基本清楚
新手友好度
38/100

把新 issue 寄到你的電子郵件信箱

精選適合新手參與的 GitHub issue 摘要。