関数内にあるmultiprocessが実行されず動作しない

Question

前提

python subprocess で実行したpyファイルの関数内にあるmultiprocessが実行されず動作しない

地の文でマルチプロセスをすることはできましたが関数内部でマルチプロセスできる方法を探しています。ただし必須ではなく、関数と呼び出し場所の位置が離れていると、編集するときに不便であるという理由なので、外部関数であっても、任意の位置で宣言できる(内部に書いた記述を外部で宣言する)といった方法でも大丈夫です

(追記)実際のプログラムは量が多く、今後も何度も編集する予定なので、地の文が宣言できる場所で宣言すると、プログラムの編集の時に関数と呼び出す位置が離れすぎて書き替えが不便なので難しいです。

実現したいこと

• マルチプロセスが動作させる
• マルチプロセスを呼び出した場所とその関数が近い場所にあること(実際のプログラムは長いため地の文に書こうとすると離れた位置になりどこで使う関数かわかりにくくなるので)
• できるだけ可読性を下げない

関数の構造を維持したまま(内部関数のまま)マルチプロセスを行う。

発生している問題・エラーメッセージ

エラーは出ませんがプログラムが止まったまま動きません

該当のソースコード

コンソール上でのコマンド

python3 a.py

a.py

from subprocess import run
run(["python3","b.py"])

b.py

def c():
    from concurrent.futures import ProcessPoolExecutor
    import numpy as np
    def d (i):
        print(i)
    pool = ProcessPoolExecutor(max_workers=4)
    for i in range(10):
        pool.submit(d,i)
    pool.shutdown()

c()

試したこと

ググろうとしましたが、知りたい情報がヒットせず挫折しました（ググり方が悪いのかmultiprocessを使ってsubprocessを行う記述ばかりで私がしたいことを調べることができませんでした）

私が言っていることを実現する解決方法の一つは、サンプルプログラムの
a.py

from subprocess import run

f2=open('b.py',encoding="utf-8")
str1=f2.read()
str1=str1.replace(何らかの書き換える処理)#実際はreを使った正規表現でもっと複雑な置き換えをする
f2.close()
run(["python3","b.py"])

でb.pyの内容を書き換えれば、編集時は関数内部に記述し、実行時のみ関数外部に書き込むという処理をすることで実現できますが、可読性と、編集したい時の変更作業が難しくなるので、この方法は避けたいです

上にあげた方法のように、かなり無理のあるやり方でもいいので、内部関数でマルチプロセスを行う方法　または
外部関数を別の関数の内部に記述できる方法をお教えいただけると幸いです

補足情報（FW/ツールのバージョンなど）

ubuntu 21 LTS
anaconda 2021_11
python 3.9

参考

https://teratail.com/questions/110659

Comments

[meg_]

> ググろうとしましたが、知りたい情報がヒットせず挫折しました
「ググろうとしましたが」と「ヒットせず」が矛盾していますが、検索したのでしょうか？したのであればどんなサイトを確認しましたか？（回答の重複を避けるためにも知りたいです）

[meg_]

b.pyは正常に動作するのですよね？

Answer 1

参考文献を読んで諦めがつきました。
表記したように、プログラムを文章として書く手法で解決しました

Answer 2

Windows11ではb.py単独でもエラーが発生しましたのでいくつか修正しました。
b.pyを修正してwindows11でa.pyを実行した結果です。

0
1
2
3
4
5
6
7
8
9

def c():
    from concurrent.futures import ProcessPoolExecutor

    pool = ProcessPoolExecutor(max_workers=4)
    for i in range(10):
        pool.submit(d,i)
    pool.shutdown()

def d (i):
    print(i)

if __name__ == "__main__":
    c()

参考：内部関数を利用した並列処理について

Comments

[python_begin33]

回答ありがとうございました。
私はubuntuで実行しているので　”if __name__ == "__main__":”をつけなくてもマルチプロセスは動作しました
確かにグローバルで関数で宣言するとうまくいきますが、私がしたかったことは内部関数であるという条件の中でマルチプロセスを実行するということでした。　質問の意図が異なることお詫びいたします。
質問内容を修正します