ncu-ci walk: exclude PR-modified tests from the flaky count

Aberta
#1,164 0 comentários 0 reações 0 responsáveis Ver no GitHub

Ninguém assumiu esta issue ainda.

Avaliação

Dificuldade
3/5
Tempo estimado
1-2 dias
Facilidade para iniciantes
65/100
Tipo de issue
Bug
Clareza
Razoavelmente clara
Status de atividade
Pouca atividade
Stack de tecnologia
javascript
Domínio
ci-cd, testing

Direção de pesquisa

Comece pela lógica de walk do ncu-ci que calcula os flaky counts e os relatórios de confiabilidade e, em seguida, rastreie como cada ocorrência é associada à revisão do PR testado. Use o exemplo test-ffi-fast-buffer.js e CI build 75799 como caso de referência; o trabalho estará concluído quando as ocorrências cujo arquivo de teste foi modificado pelo PR não contribuírem mais para o flaky count.

Escrita pelo modelo de indexação a partir do texto da issue.

Descrição

Current Behavior

Failures currently contribute to the flaky count even when the PR modified the failing test. Such failures are likely caused by the PR and should not count as independent flaky occurrences.

For example, CI build 75799 failed test-ffi-fast-buffer, but the PR modified test/ffi/test-ffi-fast-buffer.js. Excluding this occurrence would leave only one qualifying PR, so the test would not appear in the reliability report:

https://github.com/nodejs/reliability/blob/main/reports/2026-08-15.md

Expected Behavior

Exclude an occurrence from the flaky count when its test file was modified by the tested PR revision.

Linguagem predominante
JavaScript
Estrelas
313
Forks
137
Merge médio
2d 8h
PRs com merge (30d)
24

Guia de contribuição

Abrir o guia de contribuição

Primeiros passos

  1. Leia a issue inteira e depois o guia de contribuição do projeto.
  2. Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
  3. Faça um fork do repositório e trabalhe em uma branch.
  4. Abra um pull request que referencie o número da issue.

Mais de nodejs/node-core-utils

Todas as issues de nodejs/node-core-utils

Issues semelhantes

Mais issues de JavaScript

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.