google / google/agents-cli

Evaluation experiment runs

Offen
#54 2 Kommentare 0 Reaktionen 1 zugewiesene Person Beansprucht von @asrujana-44 Auf GitHub ansehen
known issue
Vorherrschende Sprache
Python
Sterne
5.9k
Forks
660
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

### What happened?

The `agents-cli eval submit` command does not create experiments on the agent platform. Is this supposed to happen?

### Steps to Reproduce

1. Deploy the agent to agent_runtime - `agents-cli deploy`
2. Run `agents-cli eval generate`
3. and the `agents-cli eval submit`
4. Go to the Evaluations inside the agent deployment on GCP console.

### What did you expect to happen?

Eval runs to be listed as experiments in the GCP console.

### Client information

Client Information

Run `agents-cli info` to output debugging information about your client.

### Command Output / Logs

_No response_

### Anything else we need to know?

_No response_

Beitragsleitfaden

Beitragsleitfaden öffnen

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.