ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

STS: Reducing high latency issues

Aperta
#1,034 0 commenti 0 reazioni 1 assegnatario Vedi su GitHub

@Prajna1999 ci sta già lavorando.

Dal 10/7/2026.

Lingua principale
Python
Stelle
18
Fork
10
Merge medio
2g 20h
PR unite (30g)
14

Descrizione

Is your feature request related to a problem?
We are experiencing high latency in STS flows, exceeding 40 seconds. This delays response times and impacts user experience.

Describe the solution you'd like

  • Track and reduce kaapi side latency (make intermediate callbacks async for llm/chain)
  • Explore ways to reduce latency at TTS
  • Conduct testing on Glific end before further action
Original issue
  • Track and reduce if any kaapi side latency (llm/chain: make intermediate callbacks async)
  • Explore reduction on latency at TTS

Comments: - STS with FS is done

  • Testing pending at Glific end
  • Then we will pick for latency

Guida per i contributori

Apri la guida per i contributori

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Valutazione

Questa issue non è ancora stata valutata.

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.