aws-samples / aws-samples/sample-autonomous-cloud-coding-agents

feat(agent): tiered validation pipeline (Tiers 2–3)

Ouverte
#490 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
agent-runtime enhancement orchestration
Langage dominant
TypeScript
Étoiles
146
Forks
46
Merge moyen
3 j 10 h
PR mergées (30 j)
24

Description

**Context:** ROADMAP.md → Agent quality → Tiered validation pipeline
**Related:** #149 (ADR-013 closed), in-pipeline fix-up draft, evaluation pipeline draft

---

## Component

Agent (Python runtime)

## Describe the feature

Three post-agent tiers per roadmap:

1. **Tier 1 (already shipped):** tool validation—build/test/lint via agent post-hooks and PR body baselines. *This issue implements Tiers 2–3 only.*
2. **Tier 2:** code quality—DRY/SOLID/complexity analysis.
3. **Tier 3:** risk and blast radius analysis—feeds PR risk classifier and review routing (#425).

See ADR-013 tiered validation pyramid.

## Use case

Build/lint passing does not imply maintainable or low-risk changes. Operators want graduated validation before PR creation and to feed evaluation metrics.

## Proposed solution

1. Define tier interfaces in `agent/` with Blueprint opt-in per repo.
2. Tier 2: integrate existing linters/analyzers (eslint complexity, ruff, optional semgrep rules) with structured JSON output.
3. Tier 3: rule-based blast radius (files touched, public API surface, migrations)—output consumed by PR risk classifier draft.
4. Non-blocking advisory mode first; optional Cedar/policy gates later.
5. Emit validation results to `TaskEventsTable` and task record for dashboards.

## Other information

- ADR-013 documents the validation pyramid; this issue tracks **implementation**.
- Design context: `docs/decisions/ADR-013-tiered-validation-pyramid.md`, `docs/design/EVALUATION.md`.

- [ ] This might be a breaking change

Guide de contribution

Ouvrir le guide de contribution

Piste de recherche

Commencez par lire docs/decisions/ADR-013-tiered-validation-pyramid.md et docs/design/EVALUATION.md, puis examinez les interfaces de agent/ et les références à TaskEventsTable. Définissez comment Tiers 2–3 s’intègrent à Blueprint opt-in, aux résultats consultatifs structurés, à la sortie de blast-radius et aux enregistrements de tâches ; le travail est considéré comme terminé lorsque ces résultats peuvent alimenter les dashboards et le classificateur de risque de PR.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
ai, devtools
Type d'issue
Fonctionnalité
Difficulté
5/5
Temps estimé
Plus d'une semaine
Activité
Calme
Clarté
Plutôt claire
Accessibilité débutants
35/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.