preguntar acerca de python-multiprocessing
3
réponses
Comment gérer les connexions SQLAlchemy dans ProcessPool?
J'ai un réacteur qui récupère les messages d'un courtier RabbitMQ et déclenche des méthodes de travail pour traiter ces messages dans un pool de processus, quelque chose comme ceci:
Ceci est implémenté en utilisant python asyncio, loop.run_in_exe …
demandé sur
1970-01-01 00:33:36
1
réponses
Comment profiler plusieurs sous-processus en utilisant Python multiprocessing et profileur de mémoire?
j'ai un utilitaire qui génère plusieurs travailleurs à l'aide de Python multiprocessing et j'aimerais pouvoir suivre leur utilisation de la mémoire via l'excellentmemory_profiler l'utilité, qui fait tout ce que je veux - en particulier l'échantillonn …
demandé sur
1970-01-01 00:33:36
3
réponses
Python arrêter de multiples processus lorsque l’on retourne un résultat?
j'essaie d'écrire un simple nonce-finder de preuve de travail en python.
def proof_of_work(b, nBytes):
nonce = 0
# while the first nBytes of hash(b + nonce) are not 0
while sha256(b + uint2bytes(nonce))[:nBytes] != bytes(nBytes):
…
demandé sur
1970-01-01 00:33:35
4
réponses
Comment résoudre les problèmes de mémoire tout en multiprocessing en utilisant Pool.map()?
j'ai écrit le programme (ci-dessous):
lire un énorme fichier texte pandas dataframe
groupby en utilisant une valeur de colonne spécifique pour séparer les données et les stocker en tant que liste d'images de données.
puis passez les données àmultipr …
demandé sur
1970-01-01 00:33:38
1
réponses
Comprendre le Multiprocessing: gestion de la mémoire partagée, Serrures et Files d’attente en Python
Multitraitement est un outil puissant en python, et je veux le comprendre plus en profondeur.
Je veux savoir quand utiliser Serrures et Files d'attente et quand utiliser un traitement multiple Gestionnaire les partager entre tous les processus.
j' …
demandé sur
1970-01-01 00:33:33
1
réponses
Python multiprocessing.cpu count () retourne ‘1’ sur 4-core Nvidia Jetson TK1
est-ce que quelqu'un peut me dire pourquoi la fonction multiprocessing.cpu_count() de Python retournerait 1 quand elle est appelée sur un Jetson TK1 avec quatre processeurs ARMv7?
>>> import multiprocessing
>>> multiprocessi …
demandé sur
1970-01-01 00:33:35
2
réponses
Keras + Tensorflow et Multiprocessing en Python
J'utilise des Keras avec Tensorflow comme backend.
j'essaie de sauvegarder un modèle dans mon processus principal puis de charger/exécuter (i.e. appeler model.predict ) dans un autre processus.
je suis en train d'essayer l'approche n …
demandé sur
1970-01-01 00:33:37