自作クラスのインスタンスをpickleした後、別カーネルで非pickle化したい

Question

質問

自作クラスのうち、空の辞書のメンバに、read_csvで読み込んだdataframeを格納したあと、pickleでdump。
別カーネルで、当該pickleデータを読み込んだら、なぜか辞書が空のままでした。
なぜでしょうか？
dump時点では確かにdataframe型でデータは格納されているのですが、なぜかpickleしたファイルの容量を見てみると1KBとなっており、うまくdumpされていないようです。
宜しくお願いします。

該当のソースコード

import pandas as pd

class Data:
    dfs = {}
    
    def Read(self, Inputs):
        for d_ in Inputs.keys():
            reader_ = pd.read_csv(Inputs[d_], chunksize=100000, dtype='object')
            for idx_, r_ in enumerate(reader_):
                if idx_==0:
                    self.dfs[d_] = r_
                else:
                    self.dfs[d_] = pd.concat([self.dfs[d_], r_])

import clsData
import pickle

inputs = {
    "fileA": "**/**.csv.gz",
    "fileB": "**/**.csv.gz"
}
data = ClsData.Data()
data.Read(inputs)
with open("***/data.pickle", "wb") as f:
    pickle.dump(data, f)

import clsData
import pickle

with open("***/data.pickle", "rb") as f:
    dataR = pickle.load(f)

Answer 1

この場合、dfsはクラス変数として定義されます。クラス変数はself経由で参照すること自体は可能ですが、pickle化の際に保存されることはありません。

同様に、クラスのインスタンスが pickle 化された際、そのクラスのコードおよびデータはオブジェクトと一緒に pickle 化されることはありません。インスタンスのデータのみが pickle 化されます。

pickle --- Python オブジェクトの直列化 — Python 3.9.1 ドキュメント

クラス変数としたい積極的な理由がなければ、dfsをインスタンス変数として宣言しておけば良いでしょう。

    def __init__(self):
        self.dfs = {}

Comments

[velocer]

ご回答ありがとうございます！クラス変数とインスタンス変数の違いを理解していませんでした。

[velocer]

追加ですみません。
クラスインスタンスはpickleされないとのことですが、以下のようにkernel1でクラス変数を上書きしてpickleしたものを非pickle化すると、クラス変数が変化してしまっているようです。
これはなぜでしょうか？

```clsTest
class Test():
var = 0
```

```kernel1
import clsTest
import pickle

test = clsTest.Test()

test.var = 1

with open('.../test.pickle', 'wb') as f:
pickle.dump(test, f)
```

```kernel2
import clsTest
import pickle

with open('.../test.pickle', 'rb') as f:
testOutput = pickle.load(f)
```

[hayataka2049]

test.var = 1
はインスタンス変数を新たに作っています。
どうしてもクラス変数に代入したい場合は、
clsTest.Test.var = 1
と書くことになります。
解説記事はネット上に多くあるので、「python クラス変数 代入」などで検索してみてください。

[hayataka2049]

一応ここで雑にまとめておきますと、
・参照の場合は、インスタンス変数→クラス変数と辿る。よって同名のインスタンス変数がなければクラス変数にアクセスできる
・代入の場合は、インスタンス変数に代入する。同名のインスタンス変数が、もともとなくても作る。__init__でインスタンス変数を作るのも、クラス初期化時に自動的に呼び出されるだけで、やっていることは同じ
がpythonのオブジェクト指向です。

[velocer]

なるほど、インスタンス変数として作られてしまっていたのですね。最後にまとめてもいただき、本当にありがとうございました。