ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Assessment Configuration: Attach rubric documents

Aperta
#1,180 0 commenti 0 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Lingua principale
Python
Stelle
18
Fork
10
Merge medio
2g 20h
PR unite (30g)
14

Descrizione

Is your feature request related to a problem?
Currently, rubric and knowledge documents can only be included inline in the prompt. This limitation impacts the flexibility and usability of the assessor configuration.

Describe the solution you'd like

  • Enable the assessor config to attach rubric and knowledge documents, rather than just inline text.
  • Ensure attached documents are provided to the LLM as attachments during the assessment process.
Original issue

Context

Currently model answer sheets and knowledge/rubric documents can only be placed inline in the prompt. Ability to attach rubric/knowledge docs in the assessor config is missing.

Acceptance criteria

  • Assessor config supports attaching rubric/knowledge documents (not just inline prompt text).
  • Attached docs are provided to the LLM as attachments in the assessment path.

Guida per i contributori

Apri la guida per i contributori

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Direzione di ricerca

Inizia tracciando il modo in cui la configurazione di assessor rappresenta i documenti inline di rubric e conoscenza, quindi segui il percorso di valutazione in cui tali valori vengono inviati all’LLM. Il lavoro è completato quando la configurazione di assessor accetta documenti di rubric e conoscenza allegati e la valutazione invia tali documenti come allegati LLM; aggiungi o aggiorna la copertura per entrambi i criteri di accettazione.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
python
Ambito
ai, backend
Tipo di issue
Funzionalità
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Attiva
Chiarezza
Abbastanza chiara
Idoneità per principianti
55/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.