self._manager is None when proxy gets passed between processes and causes AttributeError

Abierto
#99,595 0 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
3/5
Tiempo estimado
1-2 días
Aptitud para principiantes
25/100
Tipo de issue
Error
Claridad
Bien especificado
Estado de actividad
Estancado
Stack tecnológico
python
Área
backend

Línea de trabajo

Reproduce el fallo con el ejemplo mínimo test.py y, después, inspecciona Lib/multiprocessing/managers.py alrededor de BaseProxy._callmethod y el PR vinculado gh-99598. Se considera terminado cuando un proxy pasado a otro proceso puede llamar a make_child sin el AttributeError y la regresión está cubierta por una prueba.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

3.11 3.12 3.13 stdlib type-bug

Bug report

When a proxy derived from multiprocessing.managers.BaseProxy is passed between processes, the self._manager attribute becomes None. self._manager is however accessed to retrieve its _registry attribute, which contain the method_to_typeid map recorded into the manager viaBaseManager.register(), causing an AttributeError. The solution is to decouple the role of the manager from the role of the registry and propagate the registry separately. I'll submit a pull request to fix this.

Minimal failing example

test.py

from multiprocessing import Process
from multiprocessing.managers import BaseProxy, BaseManager


class Parent(object):
    def __init__(self, *args, **kwargs):
        pass

    def make_child(self):
        return Parent()


class MyManager(BaseManager):
    pass


def child_generator(parent):
    parent.make_child()


if __name__ == "__main__":
    MyManager.register('Parent', callable=Parent,
                       method_to_typeid={'make_child': 'Parent'})

    with MyManager() as manager:
        parent = manager.Parent()
        process = Process(target=child_generator, args=(parent, ))
        process.start()
        process.join()
Output
❯ python3 test.py
Process Process-2:
Traceback (most recent call last):
  File "/usr/local/Cellar/python@3.10/3.10.8/Frameworks/Python.framework/Versions/3.10/lib/python3.10/multiprocessing/process.py", line 314, in _bootstrap
    self.run()
  File "/usr/local/Cellar/python@3.10/3.10.8/Frameworks/Python.framework/Versions/3.10/lib/python3.10/multiprocessing/process.py", line 108, in run
    self._target(*self._args, **self._kwargs)
  File "test.py", line 18, in child_generator
    parent.make_child()
  File "<string>", line 2, in make_child
  File "/usr/local/Cellar/python@3.10/3.10.8/Frameworks/Python.framework/Versions/3.10/lib/python3.10/multiprocessing/managers.py", line 824, in _callmethod
    proxytype = self._manager._registry[token.typeid][-1]
AttributeError: 'NoneType' object has no attribute '_registry'

Environment

  • CPython versions tested on: 3.6, 3.7, 3.8, 3.9, 3.10
  • Operating system and architecture: macOS Monterey 12.6
Linked PRs
  • gh-99598
Lenguaje dominante
Python
Estrellas
77.2k
Forks
36k
Merge medio
1 d 9 h
PR fusionados (30 d)
558

Guía de contribución

Abrir la guía de contribución

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de python/cpython

Todos los issues de python/cpython

Issues similares

Más issues de Python

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.