apache / apache/arrow

[Python] Multiple warnings and asserts triggered in debug CPython 3.11

Aperta
#33,765 9 commenti 0 reazioni 0 assegnatari Vedi su GitHub
Component: Python Type: bug
Lingua principale
C++
Stelle
17.1k
Fork
4.3k
Merge medio
3g 20h
PR unite (30g)
94

Descrizione

### Describe the bug, including details regarding any error messages, version, and platform.

CPython [can be built in debug mode](https://docs.python.org/3/using/configure.html#python-debug-build) to catch some maybe-fatal-maybe-not errors. We have such python3.11 configured with `--with-pydebug` and pyarrow 10.0.1 installed, here is an example of gc warning
```
>>> import pyarrow as pa
>>> table = pa.table({'a': [1]})
gc:0: ResourceWarning: Object of type pyarrow.lib.Int64Array is not untracked before destruction
```
similar code sometimes triggers assertion
```
gc:0: ResourceWarning: Object of type pyarrow.lib.UInt16Array is not untracked before destruction
Modules/gcmodule.c:442: update_refs: Assertion "gc_get_refs(gc) != 0" failed
Enable tracemalloc to get the memory block allocation traceback

object address : 0x7f804e8762e0
object refcount : 0
object type : 0x7f80fcc3f5e0
object type name: pyarrow.lib.UInt16Array
object repr :

Fatal Python error: _PyObject_AssertFailed: _PyObject_AssertFailed
Python runtime state: initialized
```
Another crash
```
>>> import pyarrow as pa
>>> pa.table({0: []})
python: Objects/typeobject.c:1068: type_call: Assertion `!_PyErr_Occurred(tstate)' failed.
Aborted (core dumped)
```

### Component(s)

Python

Guida per i contributori

Apri la guida per i contributori

Direzione di ricerca

Riproducete gli avvisi e gli arresti anomali con una build di debug di CPython 3.11, pyarrow 10.0.1 e gli esempi nell’issue. Esaminate i percorsi segnalati in Modules/gcmodule.c e Objects/typeobject.c, quindi tracciate gli oggetti pyarrow coinvolti; il lavoro è completato quando gli esempi non producono più avvisi, asserzioni o errori fatali.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
cpp, python
Ambito
backend, data
Tipo di issue
Bug
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Da chiarire
Idoneità per principianti
25/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.