質問編集履歴
1
pandas: mergeの追加
test
CHANGED
File without changes
|
test
CHANGED
@@ -1,6 +1,13 @@
|
|
1
1
|
RAMメモリ以上のビックデータを扱う方法(実行時にショートする)
|
2
2
|
|
3
3
|
データフレーム型の大容量csvファイル(20gb×2)をPythonのmerge機能を用いて結合させようとするとメモリ不足になりパソコンがショートします。
|
4
|
+
|
5
|
+
**pandas: merge
|
6
|
+
|
7
|
+
例)
|
8
|
+
#結合 左寄せ
|
9
|
+
df = pd.merge(x, y, on='ID, how='left')**
|
10
|
+
|
4
11
|
|
5
12
|
大容量のデータベースを使用する際、このようなメモリ以上をうまく扱う方法はあるのでしょうか。
|
6
13
|
・外付けSSDを一時的にRAMとして扱う方法があるか
|