aws-samples / aws-samples/amazon-bedrock-samples
Accessing the Bedrock evaluation summary information
Offen
- Vorherrschende Sprache
- Jupyter Notebook
- Sterne
- 1.5k
- Forks
- 734
- Ø Merge
- 1 T. 6 Std.
- Gemergte PRs (30 T.)
- 4
Beschreibung
Is it possible to access the custom metrics score and the number of prompts values, in the Bedrock model evaluation summary, using Python SDK?
Beitragsleitfaden
Rechercherichtung
Das Issue nennt keine Repository-Datei, keinen Test und keinen Einstiegspunkt. Beginne damit, die Bedrock model evaluation APIs des Python SDK mit der in dem angehängten Bild gezeigten Zusammenfassung abzugleichen; als abgeschlossen gilt die Untersuchung, wenn festgestellt wurde, ob benutzerdefinierte Metriken und Prompt-Anzahlen verfügbar sind, einschließlich eines dokumentierten Zugriffswegs, falls dies der Fall ist.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- aws, python
- Bereich
- ai, cloud
- Issue-Typ
- Feature
- Schwierigkeit
- 5/5
- Geschätzter Aufwand
- Über eine Woche
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 20/100