ホームページ >バックエンド開発 >Python チュートリアル >Pythonのスレッドとプロセスの違いとメリット・デメリット

Pythonのスレッドとプロセスの違いとメリット・デメリット

乌拉乌拉~
乌拉乌拉~オリジナル
2018-08-23 17:42:402204ブラウズ

この記事では、Python のスレッドとプロセスとは何かを見てみましょう。 Python のスレッドとプロセスに関する関連知識を学び、Python のスレッドとプロセスの違い と利点と欠点を理解します。 マルチタスクを実現する最も一般的な 2 つの方法であるマルチプロセッシングとマルチスレッドを紹介しました。次に、両方のアプローチの長所と短所について説明します。

まず、マルチタスクを実現するために、通常、マスターはタスクの割り当てを担当し、ワーカーはタスクの実行を担当するマスター-ワーカー モデルを設計します。通常は 1 人のマスターと複数のワーカーが存在します。

複数のプロセスを使用してマスター-ワーカーを実装する場合、メインプロセスはマスター、その他のプロセスはワーカーになります。

マルチスレッドを使用してマスター/ワーカーを実装する場合、メインスレッドがマスターとなり、他のスレッドがワーカーとなります。

マルチプロセス モードの最大の利点は、サブプロセスがクラッシュしてもメイン プロセスや他のサブプロセスに影響を与えないため、安定性が高いことです。 (もちろん、マスタープロセスがハングアップすると、すべてのプロセスがハングアップしますが、マスタープロセスはタスクの割り当てのみを担当しており、ハングアップする確率は低いです) 有名なApacheが最初にマルチプロセスモードを採用しました。

マルチプロセス モードの欠点は、プロセス作成のコストが高いことです。Unix/Linux システムでは fork を呼び出しても問題ありませんが、Windows ではプロセスの作成にコストがかかります。さらに、オペレーティング システムが同時に実行できるプロセスの数にも制限があり、メモリと CPU の制限により、数千のプロセスが同時に実行されると、オペレーティング システムのスケジューリングに問題が発生することもあります。

マルチスレッド モードは、通常、マルチプロセスよりも若干高速ですが、それほど高速ではありません。さらに、マルチスレッド モードの致命的な欠点は、スレッドのハングがプロセス全体のクラッシュを直接引き起こす可能性があることです。すべてのスレッドがプロセス メモリを共有します。 Windows では、スレッドによって実行されるコードに問題がある場合、「プログラムは不正な操作を実行したため、間もなく終了します。」というプロンプトが表示されることがよくありますが、実際には、特定のスレッドに問題があることがよくあります。ただし、オペレーティング システムはプロセス全体を強制的に終了します。

Windows では、マルチプロセスよりもマルチスレッドの方が効率的であるため、Microsoft の IIS サーバーはデフォルトでマルチスレッド モードを採用しています。マルチスレッドの安定性の問題により、IIS は Apache ほど安定していません。この問題を軽減するために、IIS と Apache にはマルチプロセスとマルチスレッドの混合モードが導入されており、問題はますます複雑になっています。

スレッド切り替え

マルチプロセスでもマルチスレッドでも、数が多ければ絶対に効率は上がりません。

たとえば、残念ながら高校受験を控えていて、中国語、数学、英語、物理、化学の 5 科目の宿題を毎晩しなければならず、それぞれの宿題に 1 時間かかるとします。

最初に中国語の宿題に 1 時間を費やし、次に数学の宿題に 1 時間を費やし、その後すべてを順番に完了して合計 5 時間を費やす場合、この方法はシングルタスク モデルと呼ばれます。またはバッチ モデル プロセス タスク モデル。

マルチタスク モデルに切り替える予定があるとします。最初に中国語を 1 分間やり、次に数学の宿題に切り替え、1 分間やってから英語に切り替える、というように続けることができます。これはシングルコアCPUがマルチタスクを行うのと同じで、幼稚園児から見ると5教科の宿題を同時に書いていることになります。

ただし、宿題を切り替えるには代償がかかります。たとえば、中国語から数学に切り替える場合は、まずテーブルの上の中国語の本とペンを片付けてから (これをシーンの保存と呼びます)、次に開く必要があります。数学の宿題を始める前に、数学の教科書を読み、コンパスと定規を見つけてください (これを新しい環境の準備といいます)。プロセスまたはスレッドを切り替える場合もオペレーティング システムは同じであり、まず現在の実行環境 (CPU レジスタの状態、メモリ ページなど) を保存し、次に新しいタスクの実行環境を準備する (最後のレジスタの状態を復元する) 必要があります。実行を開始する前に、メモリ ページの切り替えなど)。この切り替えプロセスは高速ですが、時間がかかります。同時に実行されているタスクが数千ある場合、オペレーティング システムは主にタスクの切り替えで忙しく、タスクを実行する時間があまりありません。この状況で最も一般的な状況は、ハード ディスクからビープ音が激しく鳴り、何も起こらないことです。ウィンドウをクリックすると応答があり、システムは一時停止アニメーション状態になります。

したがって、マルチタスクの数が限界に達すると、システムのすべてのリソースが消費され、その結果、効率が急激に低下し、すべてのタスクがうまく完了しなくなります。

コンピューティング集中型と IO 集中型の比較

マルチタスクを使用するかどうかの 2 番目の考慮事項は、タスクの種類です。タスクをコンピューティング集約型と IO 集約型に分けることができます。

コンピューティング集約型タスクは、pi の計算、ビデオの高解像度デコードなど、CPU リソースを消費する大量の計算を特徴とし、すべて CPU のコンピューティング能力に依存します。このようなコンピューティング負荷の高いタスクはマルチタスクでも実行できますが、タスクの数が増えると、タスクの切り替えに時間がかかり、タスクを実行する際の CPU の効率が低下します。 CPU の使用、コンピューティング集約型タスク 同時タスクの数は CPU コアの数と同じである必要があります。

コンピューティング集中型のタスクは主に CPU リソースを消費するため、コードの実行効率が非常に重要です。 Python などのスクリプト言語は実行効率が非常に低く、計算負荷の高いタスクにはまったく適していません。計算負荷の高いタスクの場合は、C 言語で記述することをお勧めします。

2 番目のタイプのタスクは IO 集中型です。ネットワークおよびディスク IO を伴うタスクはすべて IO 集中型のタスクです。このタイプのタスクの特徴は、CPU 消費量が非常に少なく、ほとんどの場合、CPU 消費量が非常に少ないことです。タスクの内容は、IO 操作が完了するまで待機することです (IO の速度は CPU やメモリの速度よりもはるかに遅いため)。 IO 集中型のタスクの場合、タスクが多いほど CPU 効率は高くなりますが、制限があります。最も一般的なタスクは、Web アプリケーションなどの IO 集中型のタスクです。

IO 集中型タスクの実行中は、時間の 99% が IO に費やされ、CPU に費やされる時間はほとんどありません。そのため、非常に遅い実行速度を置き換えるために、非常に高速な C 言語を使用します。 Pythonのスクリプト言語では業務効率は全く向上しません。 IO 集中型のタスクの場合、開発効率が最も高い (コード量が最も少ない) 言語が最適です。スクリプト言語が第一の選択肢で、C 言語は最も悪い言語です。

非同期 IO

CPU と IO の速度の大きな違いを考慮すると、タスクは実行中にほとんどの時間を IO 操作の待機に費やします。単一プロセス、単一スレッド モデルは他のモデルにつながります。タスクは並列実行できないため、複数のタスクの同時実行をサポートするマルチプロセス モデルまたはマルチスレッド モデルが必要です。

最新のオペレーティング システムでは IO 操作が大幅に改善されており、最大の特徴は非同期 IO をサポートしていることです。オペレーティング システムが提供する非同期 IO サポートを最大限に活用すると、単一プロセス、単一スレッド モデルを使用して複数のタスクを実行できます。この新しいモデルは、イベント駆動型モデルと呼ばれます。Nginx は、非同期 IO。シングルコア CPU 上で動作します。シングルプロセス モデルを使用すると、効率的にマルチタスクをサポートできます。マルチコア CPU では、マルチコア CPU の利点を最大限に活用して、複数のプロセス (CPU コアの数と同じ数) を実行できます。システム内のプロセスの総数は非常に限られているため、オペレーティング システムのスケジューリングは非常に効率的です。非同期 IO プログラミング モデルを使用してマルチタスクを実装することが大きなトレンドになっています。

Python 言語に対応するシングルスレッドの非同期プログラミング モデルはコルーチンと呼ばれ、コルーチンのサポートにより、イベント駆動に基づいて効率的なマルチタスク プログラムを作成できます。

以上がこの記事の内容です. この記事では主に python におけるスレッドやプロセスの違いやメリット・デメリットを紹介します. 上記を理解するために参考にしていただければ幸いです. 内容.この記事で説明したことがあなたのお役に立ち、Python の学習が容易になることを願っています。

関連知識の詳細については、php 中国語 Web サイトの

Python チュートリアル 列を参照してください。

以上がPythonのスレッドとプロセスの違いとメリット・デメリットの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

声明:
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。