Maison > Article > développement back-end > Pourquoi l'importation de Numpy limite-t-elle le multitraitement à un seul cœur ?
Introduction :
Multiprocessing, une bibliothèque Python pour paralléliser les tâches, objectifs pour répartir le travail sur plusieurs cœurs. Cependant, les utilisateurs ont rencontré un problème où l'importation de Numpy interfère avec cette distribution, ce qui entraîne l'attribution de tous les processus de travail à un seul cœur.
Explication :
Lors de l'importation de Numpy , certains modules gourmands en CPU dans Numpy (par exemple, OpenBLAS) peuvent modifier l'affinité du cœur. Cette interférence attribue tous les processus de travail au même noyau, éliminant ainsi les avantages de la parallélisation du multitraitement.
Solution de contournement :
Pour résoudre ce problème, réinitialisez l'affinité des tâches à l'aide du code extrait : os.system("taskset -p 0xff %d" % os.getpid()). Cette commande oblige le système d'exploitation à répartir les processus de travail de manière égale sur tous les cœurs disponibles.
Considérations supplémentaires :
Solutions alternatives :
En appliquant ces solutions, le multitraitement peut répartir efficacement les processus de travail sur plusieurs cœurs, résoudre le problème initial du clustering de base et améliorer les performances de parallélisation.
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!