非同期リクエストを実行するための Python Celery とスレッドライブラリの比較 [closed] 質問する

Pythonインタプリタは、（悪名高い）グローバルインタープリタロック別名 (GIL)。したがって、Python のスレッド化は、計算と IO が同時に発生する場合にのみ並列処理を提供します。少なくとも CPython 2 または 3 では、計算にバインドされたタスクは、Python スレッド化モデルのスレッド化によるメリットをほとんど得られません。

一方、これらの制限は、Celery のようなキューイング システムで行うマルチプロセスには適用されません。マルチコア マシン、または複数のマシンで同時に実行できる Python のワーカー インスタンスを複数実行できます。

あなたのシナリオを理解している限り、つまり Web サイトでのやり取りによって長時間実行されるジョブが開始されるのであれば、キューイングがほぼ間違いなく最適な方法です。真の並列処理と、処理を他のマシンに移動する簡単なオプションが得られます。