jupyter notebookキャッシュの保存について

Question

計算時間が数時間かかるような解析後そのrunしているそのファイルをclose and haltだったりkernelをshutdownしてしまうと、(close and haltとkernelのshutdownやrestartの違いがわからないので、それについても別に教えていただけると恐縮です。)次にjupyterで解析を行うときにおいても初めからやる必要が出てきてしまうのが非常に非効率であると思います。
例えば以下のようなコード（コードに意味はありませんがa,bともに巨大なリストで時間がかかることを表しています。）

c = []

for i in a:
    ...
    for k in b:
        ...
    c.append(x)

上記の解析からcを計算するのに数時間掛ったとします。
しかし、ファイルをclose and haltするとcのリストの情報が消えてしまうので再び計算しなくてはいけなくなります。
このとき、cの結果を保存しておく方法はありますか？
パソコンを閉じないでJupyterを動かし続けるという方法以外でよろしくお願いいたします。

Answer 1

close and haltとkernelのshutdownやrestartの違いがわからないので、それについても別に教えていただけると恐縮です。

• close and halt: カーネルをシャットダウンして、開いている Notebook を閉じる。
• shutdown: カーネルをシャットダウンする。開いている Notebook は閉じない。
• restart: カーネルをシャットダウンして、再度起動する。

このとき、cの結果を保存しておく方法はありますか？

変数の値はメモリ上に保存されていますが、カーネルをシャットダウンすると破棄されてしまうので、再度開いても結果はどこにも残っていません。
一度計算した結果を残して置きたい場合は、ファイルで保存してください。(保存、読み込みを行うコードを書いてください。)
どのような形式で保存するかは、コードを書く人の自由です。

数値等であれば、ndarray に変換して numpy の loadtxt、savetxt を使うのが便利です。

import numpy as np

lst = [1, 2, 3]

# 保存
np.save('lst.npy', lst)

# 読み込み
lst = np.load('lst.npy')
print(lst)  # [1 2 3]

Comments

[yu__]

close and halt: カーネルをシャットダウンして、開いている Notebook を閉じる。
shutdown: カーネルをシャットダウンする。開いている Notebook は閉じない。
restart: カーネルをシャットダウンして、再度起動する。
簡潔な説明ありがとうございました！
疑問が解決しました！halt と shotdownが同じなんですね。

そのように保存しておく方法があったことも知りませんでした。ありがとうございました。
ベストアンサーにさせていただきました！

Answer 2

kernelをshutdownするとメモリー上のデータは消えてしまうので、その前にファイル等に書き出しておく必要があります。Pythonのオブジェクトをそのまま保存したければpickleのdump等のメソッドが使えると思います。中間データとして書き出しておくのがいいと思います。再開するときは、loadを使ってファイルから読み込んでから使います。

テーブル形式だとcsvがよく使われますが、浮動小数点数を扱うのはあまり得意ではないフォーマットです。