Preguntas con la etiqueta [multiprocessing]

Lista multiprocessing preguntas

Tengo una gran variedad de datos (de solo lectura) que quiero que varios procesos procesen en paralelo. Me gusta la Pool.mapfunción y me gustaría usarla para calcular funciones con esos

¿El grupo de procesos de Python no es demoníaco?

10
respuestas
147
votos
80.4k
vistas

¿Sería posible crear un grupo de Python que no sea demoníaco? Quiero que un grupo pueda llamar a una función que tenga otro grupo dentro. Quiero esto porque los procesos

Encontré un problema extraño con un programa Python que procesaba imágenes con la pyvipsbiblioteca. Aquí hay una versión simplificada de mi problema. Intento crear una matriz numpy (que proviene de

En este momento tengo un módulo central en un marco que genera múltiples procesos usando el multiprocessingmódulo Python 2.6 . Debido a que utiliza multiprocessing, existe un registro compatible con

Estoy intentando devolver valores de subprocesos, pero lamentablemente estos valores no se pueden seleccionar. Así que utilicé variables globales en el módulo de subprocesos con éxito, pero no pude recuperar

Estoy aprendiendo a usar los módulos threadingy multiprocessingen Python para ejecutar ciertas operaciones en paralelo y acelerar mi código. Me resulta difícil (tal vez porque no tengo ninguna base teórica

¿Cómo ejecutar funciones en paralelo?

9
respuestas
192
votos
394.4k
vistas

Estoy intentando ejecutar varias funciones en paralelo en Python. Tengo algo como esto: files.py import common #common is a util class that handles all the IO stuff dir1 = 'C:\folder1'

Multiprocesamiento vs subprocesos Python [duplicado]

12
respuestas
1.0k
votos
564.2k
vistas

Estoy tratando de comprender las ventajas del multiprocesamiento sobre el subprocesamiento . Sé que el multiprocesamiento evita el bloqueo global del intérprete, pero ¿qué otras ventajas existen? ¿ Los subprocesos

No he visto ejemplos claros con casos de uso para Pool.apply , Pool.apply_async y Pool.map . Estoy usando principalmente Pool.map; ¿Cuáles son las ventajas de los demás?

En el código de ejemplo siguiente, me gustaría obtener el valor de retorno de la función worker. ¿Cómo puedo hacer esto? ¿Dónde se almacena este valor? Código de ejemplo: import

Lamento no poder reproducir el error con un ejemplo más simple y mi código es demasiado complicado para publicarlo. Si ejecuto el programa en el shell IPython en lugar del