回答編集履歴
3
追記
test
CHANGED
|
@@ -105,3 +105,65 @@
|
|
|
105
105
|
|
|
106
106
|
|
|
107
107
|
|
|
108
|
+
|
|
109
|
+
|
|
110
|
+
|
|
111
|
+
## 子プロセスを起動してコマンドラインを叩く方法
|
|
112
|
+
|
|
113
|
+
|
|
114
|
+
|
|
115
|
+
本題の fs からは離れますが、[child_process](https://nodejs.org/api/child_process.html#child_process_child_process_execfile_file_args_options_callback) で ``cp`` コマンドも試しました。
|
|
116
|
+
|
|
117
|
+
バイナリアプリケーションに委譲するのでメモリ管理は不要との考えです
|
|
118
|
+
|
|
119
|
+
|
|
120
|
+
|
|
121
|
+
```javascript
|
|
122
|
+
|
|
123
|
+
const {exec} = require('child_process');
|
|
124
|
+
|
|
125
|
+
|
|
126
|
+
|
|
127
|
+
let cpCommand = ( file1, file2 ) => `cp ${file1} ${file2}`;
|
|
128
|
+
|
|
129
|
+
|
|
130
|
+
|
|
131
|
+
let start = Date.now();
|
|
132
|
+
|
|
133
|
+
exec(cpCommand("test.txt", "test2.txt"), (error, stdout, stderr) => {
|
|
134
|
+
|
|
135
|
+
if (error) {
|
|
136
|
+
|
|
137
|
+
console.error(`exec error: ${error}`);
|
|
138
|
+
|
|
139
|
+
return;
|
|
140
|
+
|
|
141
|
+
}
|
|
142
|
+
|
|
143
|
+
console.log(`time: ${Date.now()-start} [msec]`);
|
|
144
|
+
|
|
145
|
+
console.log(`stdout: ${stdout}`);
|
|
146
|
+
|
|
147
|
+
console.error(`stderr: ${stderr}`);
|
|
148
|
+
|
|
149
|
+
});
|
|
150
|
+
|
|
151
|
+
// time: 208008 [msec]
|
|
152
|
+
|
|
153
|
+
// stdout:
|
|
154
|
+
|
|
155
|
+
// stderr:
|
|
156
|
+
|
|
157
|
+
```
|
|
158
|
+
|
|
159
|
+
SDカードから読み、同一SDカードに複製するのに約5分かかりました。
|
|
160
|
+
|
|
161
|
+
microSDHC-I での複製は1分あたり500MBが目安かもしれません。
|
|
162
|
+
|
|
163
|
+
SSDドライブを利用するなど、ハードウェア性能を向上させる方法はあると思いますが、試していません
|
|
164
|
+
|
|
165
|
+
|
|
166
|
+
|
|
167
|
+
RaspberryPi は普通のLinuxマシンではありますが、ハードウェア性能は低いので、取り扱うファイルはサイズ上限を定めてシステム構築/運用するのが良いかもしれません。
|
|
168
|
+
|
|
169
|
+
500MBを超えると、正直、辛いと思います
|
2
試験結果画像の掲載
test
CHANGED
|
@@ -83,3 +83,25 @@
|
|
|
83
83
|
|
|
84
84
|
|
|
85
85
|
```
|
|
86
|
+
|
|
87
|
+
|
|
88
|
+
|
|
89
|
+
#実機試験試験結果:
|
|
90
|
+
|
|
91
|
+
|
|
92
|
+
|
|
93
|
+
手元の RaspberryPi3B+ で実験しました。
|
|
94
|
+
|
|
95
|
+
|
|
96
|
+
|
|
97
|
+
1. ご質問のコード（エラーで停止）
|
|
98
|
+
|
|
99
|
+
2. 回答させていただいた pipe() の方法（コピー成功）
|
|
100
|
+
|
|
101
|
+
※コード内にある console.time() 〜 console.timeEnd() は 2. において追加しました。
|
|
102
|
+
|
|
103
|
+
非同期であるため意味のないコード（処理開始された時点での反応速度）であり、実際は数分の時間を要しました。
|
|
104
|
+
|
|
105
|
+
|
|
106
|
+
|
|
107
|
+
|
1
追記
test
CHANGED
|
@@ -15,3 +15,71 @@
|
|
|
15
15
|
* [0から始めるNode.jsパフォーマンスチューニング](https://blog.koh.dev/2020-03-04-nodejs-performance/)
|
|
16
16
|
|
|
17
17
|
* etc
|
|
18
|
+
|
|
19
|
+
|
|
20
|
+
|
|
21
|
+
----
|
|
22
|
+
|
|
23
|
+
|
|
24
|
+
|
|
25
|
+
追記）
|
|
26
|
+
|
|
27
|
+
NodeJS のソースコードまで確認できていませんが、fs.copyFileSync() は、扱うファイルサイズに応じたメモリ領域を要するのかもしれません。
|
|
28
|
+
|
|
29
|
+
|
|
30
|
+
|
|
31
|
+
Stream レベルでのコピーも試してみてください。
|
|
32
|
+
|
|
33
|
+
時間はかかるかもしれませんが、限られたメモリサイズを用いてコピーするはずです。
|
|
34
|
+
|
|
35
|
+
|
|
36
|
+
|
|
37
|
+
```javascript
|
|
38
|
+
|
|
39
|
+
var fs = require("fs");
|
|
40
|
+
|
|
41
|
+
|
|
42
|
+
|
|
43
|
+
// 1. .pipe() で chunk データを渡す方法（今回のご質問内容ですと、こちらが手軽）。
|
|
44
|
+
|
|
45
|
+
fs.createReadStream('src.txt').pipe(fs.createWriteStream('dest.txt'));
|
|
46
|
+
|
|
47
|
+
|
|
48
|
+
|
|
49
|
+
// 2. 昔、書いた愚直にイベントリスナでコピーする方法（1.と同じ様なことをやっています）
|
|
50
|
+
|
|
51
|
+
var copyFile = ( srcFile, dstFile, callback ) => {
|
|
52
|
+
|
|
53
|
+
var stat = fs.statSync( srcFile ), newFile, oldFile;
|
|
54
|
+
|
|
55
|
+
if( fs.existsSync( srcFile ) && stat.isFile() ) {
|
|
56
|
+
|
|
57
|
+
newFile = fs.createWriteStream( dstFile ); // to
|
|
58
|
+
|
|
59
|
+
oldFile = fs.createReadStream( srcFile ); // from
|
|
60
|
+
|
|
61
|
+
oldFile.addListener("data", (chunk) => {
|
|
62
|
+
|
|
63
|
+
newFile.write(chunk);
|
|
64
|
+
|
|
65
|
+
});
|
|
66
|
+
|
|
67
|
+
oldFile.addListener("close",() => {
|
|
68
|
+
|
|
69
|
+
newFile.end();
|
|
70
|
+
|
|
71
|
+
if(callback) {
|
|
72
|
+
|
|
73
|
+
callback();
|
|
74
|
+
|
|
75
|
+
}
|
|
76
|
+
|
|
77
|
+
});
|
|
78
|
+
|
|
79
|
+
}
|
|
80
|
+
|
|
81
|
+
}
|
|
82
|
+
|
|
83
|
+
|
|
84
|
+
|
|
85
|
+
```
|