preguntar acerca de python-multiprocessing

3
réponses

Comment gérer les connexions SQLAlchemy dans ProcessPool?

J'ai un réacteur qui récupère les messages d'un courtier RabbitMQ et déclenche des méthodes de travail pour traiter ces messages dans un pool de processus, quelque chose comme ceci: Ceci est implémenté en utilisant python asyncio, loop.run_in_exe …
demandé sur 1970-01-01 00:33:36
1
réponses

Comment profiler plusieurs sous-processus en utilisant Python multiprocessing et profileur de mémoire?

j'ai un utilitaire qui génère plusieurs travailleurs à l'aide de Python multiprocessing et j'aimerais pouvoir suivre leur utilisation de la mémoire via l'excellentmemory_profiler l'utilité, qui fait tout ce que je veux - en particulier l'échantillonn …
demandé sur 1970-01-01 00:33:36
3
réponses

Python arrêter de multiples processus lorsque l’on retourne un résultat?

j'essaie d'écrire un simple nonce-finder de preuve de travail en python. def proof_of_work(b, nBytes): nonce = 0 # while the first nBytes of hash(b + nonce) are not 0 while sha256(b + uint2bytes(nonce))[:nBytes] != bytes(nBytes): …
demandé sur 1970-01-01 00:33:35
4
réponses

Comment résoudre les problèmes de mémoire tout en multiprocessing en utilisant Pool.map()?

j'ai écrit le programme (ci-dessous): lire un énorme fichier texte pandas dataframe groupby en utilisant une valeur de colonne spécifique pour séparer les données et les stocker en tant que liste d'images de données. puis passez les données àmultipr …
demandé sur 1970-01-01 00:33:38
1
réponses

Comprendre le Multiprocessing: gestion de la mémoire partagée, Serrures et Files d’attente en Python

Multitraitement est un outil puissant en python, et je veux le comprendre plus en profondeur. Je veux savoir quand utiliser Serrures et Files d'attente et quand utiliser un traitement multiple Gestionnaire les partager entre tous les processus. j' …
demandé sur 1970-01-01 00:33:33
1
réponses

Python multiprocessing.cpu count () retourne ‘1’ sur 4-core Nvidia Jetson TK1

est-ce que quelqu'un peut me dire pourquoi la fonction multiprocessing.cpu_count() de Python retournerait 1 quand elle est appelée sur un Jetson TK1 avec quatre processeurs ARMv7? >>> import multiprocessing >>> multiprocessi …
demandé sur 1970-01-01 00:33:35
2
réponses

Keras + Tensorflow et Multiprocessing en Python

J'utilise des Keras avec Tensorflow comme backend. j'essaie de sauvegarder un modèle dans mon processus principal puis de charger/exécuter (i.e. appeler model.predict ) dans un autre processus. je suis en train d'essayer l'approche n …
demandé sur 1970-01-01 00:33:37