python multiprocessingにおける実行順番について

Question

前提

python3.x以上の環境にて、multiprocessingによる並列処理を検討しています。

このとき、ubuntu環境（18.04）では、mainの実行が順番どおり行われますが、Windows環境では、multiprocessが動作している間に、全体が3回実行されます。

実現したいこと

ここに実現したいことを箇条書きで書いてください。

• ▲▲機能を動作するようにする

発生している問題・エラーメッセージ

ubuntu

check
process1:0
process2:0
process3:0
process1:1
process2:1
process1:2
process3:1
process1:3
process2:2
process1:4
process3:2
process2:3
process2:4
process3:3
process3:4
process ended
all end

windows

check
check
all end
check
all end
check
all end
process1:0
process2:0
process3:0
process1:1
process2:1
process1:2
process3:1
process1:3
process2:2
process1:4
process3:2
process2:3
process2:4
process3:3
process3:4
process ended
all end

該当のソースコード

from multiprocessing import Process
import time

print('check')


def process1():
    for i in range(5):
        time.sleep(0.5)
        print("process1:" + str(i))

def process2():
    for i in range(5):
        time.sleep(0.7)
        print("process2:" + str(i))

def process3():
    for i in range(5):
        time.sleep(0.9)
        print("process3:" + str(i))

if __name__ == '__main__':

    process1 = Process(target=process1, args=())
    process2 = Process(target=process2, args=())
    process3 = Process(target=process3, args=())

    process1.start()
    print('process1')
    process2.start()
    print('process2')
    process3.start()
    print('process3')

    process1.join()
    process2.join()
    process3.join()

    print("process ended")

print('all end')

質問

windows 環境でもubuntuとおなじく実行されるためにはどうしたらよいのでしょうか。
教えていただけると幸いです。
よろしくお願いします。

Answer 1

windowsはpythonがマルチプロセスの実現のためにつかっているforkシステムコールがちゃんと実装されていないため、別の方式を取っています。
https://docs.python.org/ja/3/library/multiprocessing.html#contexts-and-start-methods

なので、「windows 環境でもubuntuとおなじく実行される」方法はありません。

質問と同じことが起きているという説明のサイトがありました。
https://www.pythonforthelab.com/blog/differences-between-multiprocessing-windows-and-linux/

コードを書き換えて、print文をすべて、「if name == 'main':」のブロックに入れれば表示上は同じ出力になると思います。

Comments

[nigo1973]

早速ご回答いただきありがとうございます。
勉強になりました。