Bagaimanakah Saya Boleh Melaksanakan Subproses Bash selari dengan Python?

Pemprosesan Selari dengan subproses Bash dalam Python

Melaksanakan subproses bash secara selari ialah tugas biasa dalam penskripan dan automasi. Dalam Python, anda boleh menggunakan modul subproses untuk menghasilkan proses baharu, dan modul penjalinan untuk melaksanakannya secara serentak.

Walau bagaimanapun, teknik yang diterangkan dalam jawapan pertama kepada soalan yang dipautkan oleh pengguna menghasilkan pelaksanaan berurutan bagi proses bash. Untuk menjalankannya secara selari, gunakan pendekatan berikut:

1. Menggunakan multiprocessing.dummy.Pool:

Untuk pelaksanaan selari dengan bilangan proses serentak yang terhad, anda boleh menggunakan multiprocessing.dummy.Pool. Ia menyediakan antara muka berasaskan benang yang serupa dengan multiprocessing.Pool.

<code class="python">import multiprocessing.dummy as mp
from subprocess import call

pool = mp.Pool(2)  # Set the maximum number of concurrent commands
for i, returncode in enumerate(pool.imap(partial(call, shell=True), commands)):
    if returncode != 0:
        print("%d command failed: %d" % (i, returncode))</code>

2. Menggunakan Subproses dengan Kawalan Konkurensi Manual:

Anda boleh mengehadkan bilangan proses serentak tanpa menggunakan rangkaian atau kumpulan proses.

<code class="python">from subprocess import Popen
from itertools import islice

max_workers = 2
processes = (Popen(cmd, shell=True) for cmd in commands)
running_processes = list(islice(processes, max_workers))
while running_processes:
    # Check for completed processes and start new ones
    for i, process in enumerate(running_processes):
        if process.poll() is not None:
            running_processes[i] = next(processes, None)
            if running_processes[i] is None:
                del running_processes[i]
                break</code>

3. Menggunakan Subprocesses dengan os.waitpid() (Unix-only):

Pada sistem Unix, anda boleh menggunakan os.waitpid(-1, 0) untuk menyekat dan menunggu sebarang proses anak keluar. Ini menghapuskan keperluan untuk gelung yang sibuk.

Kaedah ini menyediakan pilihan yang fleksibel untuk mengawal konkurensi dalam subproses bash menggunakan Python.

Atas ialah kandungan terperinci Bagaimanakah Saya Boleh Melaksanakan Subproses Bash selari dengan Python?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!