race in record_missing_stub_packages (No such file or directory: '.mypy_cache/missing_stubs')
Nessuno ha ancora preso questa issue.
- Lingua principale
- Python
- Stelle
- 20.6k
- Fork
- 3.3k
- Metriche di merge delle PR
- Metriche PR in attesa
Descrizione
Bug Report
When running many mypy instances in parallel on the same project, our pipeline sometimes fails with the following traceback:
Traceback (most recent call last):
File "/usr/local/bin/mypy", line 8, in <module>
sys.exit(console_entry())
^^^^^^^^^^^^^^^
File "/usr/local/lib/python3.11/dist-packages/mypy/__main__.py", line 15, in console_entry
main()
File "mypy/main.py", line 102, in main
File "mypy/main.py", line 186, in run_build
File "mypy/build.py", line 193, in build
File "mypy/build.py", line 296, in _build
File "mypy/build.py", line 3539, in record_missing_stub_packages
FileNotFoundError: [Errno 2] No such file or directory: '.mypy_cache/missing_stubs'
To Reproduce
Run ten parallel mypy on 10 different files in your project from a cold start. Repeat until it fails.
Expected Behavior
That .mypy_cache/missing_stubs contains garbage or results from a random run. Or that there was a flag to disable missing_stubs writing.
Actual Behavior
See traceback above.
Your Environment
Ubuntu Linux running inside a docker container.
- Mypy version used: mypy 1.12.0, mypy-extensions 1.0.0
- Mypy command-line flags: mypy sourcefile.py
- Mypy configuration options from
mypy.ini(and other config files):
[tool.mypy]
mypy_path = "src"
disable_error_code = "import-untyped"
[[tool.mypy.overrides]]
module = [
"secretpackage.secretmodule1",
"secretpackage.secretmodule2",
]
follow_imports = "skip"
- Python version used: 3.11 (didn't record minor version when it happened)
Guida per i contributori
Apri la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Inizia in mypy/build.py, all'interno di record_missing_stub_packages, usando il traceback e la riproduzione parallela a freddo come punti di ingresso. Indaga sul motivo per cui dieci processi mypy concorrenti possono fallire durante la scrittura di .mypy_cache/missing_stubs. Il lavoro è completato quando le esecuzioni parallele non sollevano più FileNotFoundError, oppure quando il comportamento è controllabile come descritto nell'issue.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- tooling
- Tipo di issue
- Bug
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 35/100