質問するログイン新規登録

質問編集履歴

2

変更

2020/10/31 06:45

投稿

Flan.
Flan.

スコア123

title CHANGED
@@ -1,1 +1,1 @@
1
- python ビッグデータを効率的にする方法(メモリが足りないときの対処法
1
+ python メモリが足りないときの対処法(メモリのようにSSDを使いたい)
body CHANGED
File without changes

1

追加

2020/10/31 06:45

投稿

Flan.
Flan.

スコア123

title CHANGED
File without changes
body CHANGED
@@ -1,6 +1,9 @@
1
1
  python上でビッグデータ(といえるかはわからないけど)を使い機械学習をしていたのですが
2
2
  メモリーが足りず途中で止まってしまいます
3
+ pytochを使っています
3
4
  思いついたもの データの圧縮 ssdで保存など
5
+ データはメモリで保存 (x.to("cpu"))
6
+ モデルはGPUで動かしています(x.to("cuda"))
4
7
 
5
8
 
6
9
  調べても違う物しか出てこず困ってます