stackabletech / stackabletech/airflow-operator
Increase memory limit for git-sync container
Nessuno ha ancora preso questa issue.
- Lingua principale
- Rust
- Stelle
- 32
- Fork
- 6
- Merge medio
- 1g 7h
- PR unite (30g)
- 13
Descrizione
A user reported that the git-sync containers crashes (OOM) when trying to sync a large repo with dags (>100 MB). We should either increase the memory limit (currently 64 Mi) or make this easier overridable. It's currently possible with podOverrides but they need to be added for both git-sync containers in each component:
...
schedulers:
podOverrides:
spec:
initContainers:
- name: gitsync-0
resources:
limits:
memory: 256Mi
cpu: 100m
requests:
memory: 256Mi
cpu: 200m
containers:
- name: gitsync-1
resources:
limits:
memory: 256Mi
cpu: 100m
requests:
memory: 256Mi
cpu: 200m
celeryExecutors:
podOverrides:
...
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Inizia individuando i valori predefiniti delle risorse del container git-sync e le specifiche dei pod per i componenti schedulers e celeryExecutors. Confronta il limite attuale di 64 Mi con l’esempio di podOverrides, quindi verifica che la sincronizzazione di repository di grandi dimensioni non causi più un OOM e che l’impostazione della risorsa sia sovrascrivibile in modo coerente dove necessario.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- kubernetes, rust
- Ambito
- devops, infrastructure
- Tipo di issue
- Bug
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 38/100