ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Assessment Configuration: Attach rubric documents

Offen
#1,180 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

Vorherrschende Sprache
Python
Sterne
18
Forks
10
Ø Merge
2 T. 20 Std.
Gemergte PRs (30 T.)
14

Beschreibung

Is your feature request related to a problem?
Currently, rubric and knowledge documents can only be included inline in the prompt. This limitation impacts the flexibility and usability of the assessor configuration.

Describe the solution you'd like

  • Enable the assessor config to attach rubric and knowledge documents, rather than just inline text.
  • Ensure attached documents are provided to the LLM as attachments during the assessment process.
Original issue

Context

Currently model answer sheets and knowledge/rubric documents can only be placed inline in the prompt. Ability to attach rubric/knowledge docs in the assessor config is missing.

Acceptance criteria

  • Assessor config supports attaching rubric/knowledge documents (not just inline prompt text).
  • Attached docs are provided to the LLM as attachments in the assessment path.

Beitragsleitfaden

Beitragsleitfaden öffnen

Erste Schritte

  1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
  3. Forke das Repository und arbeite in einem Branch.
  4. Öffne einen Pull Request, der die Issue-Nummer nennt.

Rechercherichtung

Beginne damit nachzuverfolgen, wie die assessor-Konfiguration Inline-Rubrik- und Wissensdokumente darstellt, und folge dann dem Bewertungspfad, auf dem diese Werte an das LLM gesendet werden. Erledigt ist die Aufgabe, wenn die assessor-Konfiguration angehängte Rubrik- und Wissensdokumente akzeptiert und die Bewertung diese Dokumente als LLM-Anhänge sendet; füge Testabdeckung für beide Akzeptanzkriterien hinzu oder aktualisiere sie.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
python
Bereich
ai, backend
Issue-Typ
Feature
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Aktiv
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
55/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.