質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

2回答

14186閲覧

Pythonのmultiprocessing.Processでのグローバル変数の共有について

t-miyazaki

総合スコア71

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

1クリップ

投稿2015/11/26 10:19

Pythonのmultiprocessing.Processクラスの挙動について質問させてください。

Processオブジェクトを作成してstart()で呼び出すと、指定したメソッドが子プロセスで実行されます。このときに、子プロセスの中から、親プロセスのグローバル変数の状態が読み取り専用で参照できます。

マルチスレッドでは、メモリが共有されているので親の状態を参照することができるのは分かりますが、Processはマルチプロセスということなので、メモリ空間が親と子では分かれていると思うのですが、PythonのProcessではどのようにして子プロセスから親プロセスの状態が参照できているのでしょうか。

Python

1from multiprocessing import Process 2 3def func(): 4 global g 5 print "sub process: ", g 6 g = 200 7 8 9g = 100 10print "main before: ", g 11p = Process(target=func) 12p.start() 13p.join() 14print "main after: ", g

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答2

0

ベストアンサー

「読み取り専用」というのは具体的には「startした時の状態が読める」であって「その時の状態が読める」ではありません。また、「読み取り専用」ではなく子プロセスで変更も可能です。

下記の例のように、すると、subprocessが表示するのは300になります。
内部実装としては、p.start() を実行したときに、親プロセスの変数等諸々が子プロセスが読める空間にコピーされます。子プロセスにコピーされたglobal変数の値は、変更することも可能で、但し変更は子プロセスの中に留まります。下記例ではfunc()の中で変更した値が func_sub()の中で読みだすことができていますが、その変更は親プロセスには影響を与えません。

python

1from multiprocessing import Process 2import time 3 4def func_sub(): 5 global g 6 print "sub process: ", g 7 8def func(): 9 time.sleep(1) 10 global g 11 print "sub process: ", g 12 g = 200 13 func_sub() 14 15g = 100 16print "main before: ", g 17p = Process(target=func) 18g = 300 19print "main after Process: ", g 20p.start() 21g = 400 22print "main after strat: ", g 23p.join() 24print "main after join: ", g

投稿2015/11/26 14:14

hiro-k

総合スコア902

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

t-miyazaki

2015/11/27 07:38

回答ありがとうございます。 > 内部実装としては、p.start() を実行したときに、親プロセスの変数等諸々が子プロセスが読める空間にコピーされます なるほど、そういうことだったのですね。とりあえずこれで解決とさせていただきます。 ソース(https://github.com/python/cpython/blob/master/Lib/multiprocessing/process.py)を見たのですが、どこにそのような動作の記述があるのか分かりませんでした。見ている場所が違うのでしょうか。もしよろしければご教示頂けると助かります。
hiro-k

2015/11/27 09:50

BaseProsess の start (提示されたソース内 95行目~ ) の中の 105 行目 self._Popen(self) がプロセスを生成する処理です。 そのソース内 68行目~69行目で、 def _Popen(self): raise NotImplementedError となっていることから、 BaseProcessでは _Popen が実質定義されてないことが判ります。 では、それはどこで定義されえるか?というと、同じディレクトリの、__init__.py の 16行目 from . import context で呼ばれる、これも同じディレクトリ内の contex.py の 208行目~の Process の定義の中で _Popen が上書きされます。 子プロセスを生成した際に親プロセスの情報がコピーされること自体は、python の機能ではなくOSの一般的な機能になります。 https://ja.wikipedia.org/wiki/Fork のプロセスのアドレス空間以下が参考になるかと思います。
guest

0

16.6.1.4. プロセス間での状態の共有に目を通してみてください。

python

1from __future__ import print_function 2from multiprocessing import Process, Value 3 4def func(g): 5 print("sub process: ", g.value) 6 g.value = 200 7 8g = Value('i', 100, lock=False) # Trueだと同期アクセスになる 9print("main before: ", g.value) 10p = Process(target=func, args=(g,)) 11p.start() 12p.join() 13print("main after: ", g.value)

出力:

main before: 100 sub process: 100 main after: 200

投稿2015/11/26 14:44

sharow

総合スコア1149

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

t-miyazaki

2015/11/27 07:40

回答ありがとうございます。 状態の共有のためにValueクラスを使えば良いということは分かりました。 しかし今回の質問は、明示的に共有していないグローバル変数が子プロセスで見えているのは何故か、という意図でさせていただきました。 今後はValueクラスを使ってみたいと思います。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問