[Feature] add catalog cache for paimon
Nessuno ha ancora preso questa issue.
- Lingua principale
- Java
- Stelle
- 3.4k
- Fork
- 1.4k
- Merge medio
- 1g 9h
- PR unite (30g)
- 423
Descrizione
Search before asking
- I searched in the issues and found nothing similar.
Motivation
The show tables command will check the path of each table, when we use remote object storage as the warehouse and there are many tables in the catalog, it may cause a timeout, so I want to introduce the catalog cache to Improve query speed
Solution
No response
Anything else?
No response
Are you willing to submit a PR?
- I'm willing to submit a PR!
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Inizia tracciando il comando show tables e i controlli dei percorsi del catalogo che esegue per ogni tabella. Riproduci lo scenario di timeout con l’object storage remoto e molte tabelle del catalogo, quindi determina il comportamento della cache e i requisiti di invalidazione. Il lavoro è completato quando show tables evita i controlli dei percorsi ridondanti restituendo risultati corretti.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- java
- Ambito
- data-engineering
- Tipo di issue
- Funzionalità
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 25/100