Increase memory limit for git-sync container

Aperta
#467 0 commenti 0 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà
3/5
Tempo stimato
1-2 giorni
Idoneità per principianti
38/100
Tipo di issue
Bug
Chiarezza
Abbastanza chiara
Stato di attività
Ferma
Stack tecnologico
kubernetes, rust
Ambito
devops, infrastructure

Direzione di ricerca

Inizia individuando i valori predefiniti delle risorse del container git-sync e le specifiche dei pod per i componenti schedulers e celeryExecutors. Confronta il limite attuale di 64 Mi con l’esempio di podOverrides, quindi verifica che la sincronizzazione di repository di grandi dimensioni non causi più un OOM e che l’impostazione della risorsa sia sovrascrivibile in modo coerente dove necessario.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

A user reported that the git-sync containers crashes (OOM) when trying to sync a large repo with dags (>100 MB). We should either increase the memory limit (currently 64 Mi) or make this easier overridable. It's currently possible with podOverrides but they need to be added for both git-sync containers in each component:

...
  schedulers:
    podOverrides:
      spec:
        initContainers:
        - name: gitsync-0
          resources:
            limits:
              memory: 256Mi
              cpu: 100m
            requests:
              memory: 256Mi
              cpu: 200m
        containers:
        - name: gitsync-1
          resources:
            limits:
              memory: 256Mi
              cpu: 100m
            requests:
              memory: 256Mi
              cpu: 200m
  celeryExecutors:
    podOverrides:
...
Lingua principale
Rust
Stelle
32
Fork
6
Merge medio
1g 7h
PR unite (30g)
13

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Altre issue di stackabletech/airflow-operator

Tutte le issue di stackabletech/airflow-operator

Issue simili

Altre issue su Rust

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.