Python에서 여러 Bash 명령을 동시에 실행하려면 어떻게 해야 합니까?

Python에서 Bash 하위 프로세스의 병렬 처리

하위 프로세스를 순차적으로 실행하면 애플리케이션 성능이 저하될 수 있습니다. 여러 bash 명령을 동시에 실행하려면 Python의 스레딩 및 하위 프로세스 모듈을 활용할 수 있습니다.

하위 프로세스 직접 사용

스레딩은 병렬 처리에 필요한 것처럼 보일 수 있지만 그렇지 않습니다. 필수의. subprocess.Popen 함수를 사용하여 프로세스를 병렬로 시작할 수 있습니다:

<code class="python">from subprocess import Popen

commands = [
    'date; ls -l; sleep 1; date',
    'date; sleep 5; date',
    'date; df -h; sleep 3; date',
    'date; hostname; sleep 2; date',
    'date; uname -a; date',
]

# Run commands in parallel
processes = [Popen(cmd, shell=True) for cmd in commands]

# Perform other tasks while processes run

# Wait for completion
for p in processes:
    p.wait()</code>

동시 하위 프로세스 제한

동시 프로세스 수를 제한하려면 다중 처리 사용을 고려하세요. 스레드를 사용하여 다중 처리를 시뮬레이션하는 .dummy.Pool 모듈:

<code class="python">from functools import partial
from multiprocessing.dummy import Pool
from subprocess import call

pool = Pool(2)  # Limit to two concurrent commands

# Iterate over commands and return codes
for i, returncode in enumerate(pool.imap(partial(call, shell=True), commands)):
    if returncode != 0:
        print("%d command failed: %d" % (i, returncode))</code>

풀 없이 제한

스레드 풀 없이 동시성을 제한할 수도 있습니다:

<code class="python">from subprocess import Popen
from itertools import islice

max_workers = 2

processes = (Popen(cmd, shell=True) for cmd in commands)
running_processes = list(islice(processes, max_workers))  # Start initial processes

while running_processes:
    for i, process in enumerate(running_processes):
        if process.poll() is not None:  # Process has finished
            running_processes[i] = next(processes, None)  # Start new process
            if running_processes[i] is None:  # No new processes
                del running_processes[i]
                break</code>

위 내용은 Python에서 여러 Bash 명령을 동시에 실행하려면 어떻게 해야 합니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!