回答編集履歴

2

後半部を追加

2020/03/05 12:55

投稿

miyabi-sun
miyabi-sun

スコア21203

test CHANGED
@@ -95,3 +95,277 @@
95
95
  }
96
96
 
97
97
  ```
98
+
99
+
100
+
101
+ ---
102
+
103
+
104
+
105
+ > ただ外部のAPIと通信するのでPromise.allでは並列で1度にAPIを叩いてしまう処理になってしまいlimitを超えてしまう為、使用を控えております。
106
+
107
+
108
+
109
+ mapというのは値を関数に従って変形させた結果を取り出すという目的に使われるものなので、
110
+
111
+ 高度な非同期処理を内包したものを作るには不向きです。
112
+
113
+ なので、基本的にはfor文でお行儀よく1個ずつ処理を走らせる方向で考えるのが自然だと思います。
114
+
115
+
116
+
117
+ それでもリスト操作でこなすなら
118
+
119
+ 100個のリクエストというボールが入ったプールがあったとして、
120
+
121
+ バケツで5個ずつ組み上げる作戦があります。
122
+
123
+
124
+
125
+ [Lodashのchunk](https://lodash.com/docs/4.17.15#chunk)関数が丁度それに使えます。
126
+
127
+ 実装をコードになおすと下記のような感じ。
128
+
129
+
130
+
131
+ ```js
132
+
133
+ const range = (a, b) => Array(b - a + 1).fill(0).map((_, i) => i + a);
134
+
135
+ console.log(range(1, 10)); // [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]
136
+
137
+
138
+
139
+ const chunk = (arr, size) => arr.reduce((result, it, i) => {
140
+
141
+ if (!result[Math.floor(i / size)]) result[Math.floor(i / size)] = [];
142
+
143
+ result[Math.floor(i / size)].push(it);
144
+
145
+ return result;
146
+
147
+ }, []);
148
+
149
+ console.log(JSON.stringify(chunk(range(1, 21), 5), null, 2));
150
+
151
+ ```
152
+
153
+
154
+
155
+ ```json
156
+
157
+ [
158
+
159
+ [
160
+
161
+ 1,
162
+
163
+ 2,
164
+
165
+ 3,
166
+
167
+ 4,
168
+
169
+ 5
170
+
171
+ ],
172
+
173
+ [
174
+
175
+ 6,
176
+
177
+ 7,
178
+
179
+ 8,
180
+
181
+ 9,
182
+
183
+ 10
184
+
185
+ ],
186
+
187
+ [
188
+
189
+ 11,
190
+
191
+ 12,
192
+
193
+ 13,
194
+
195
+ 14,
196
+
197
+ 15
198
+
199
+ ],
200
+
201
+ [
202
+
203
+ 16,
204
+
205
+ 17,
206
+
207
+ 18,
208
+
209
+ 19,
210
+
211
+ 20
212
+
213
+ ],
214
+
215
+ [
216
+
217
+ 21
218
+
219
+ ]
220
+
221
+ ]
222
+
223
+ ```
224
+
225
+
226
+
227
+ これを実際に作るなら[reduce](https://developer.mozilla.org/ja/docs/Web/JavaScript/Reference/Global_Objects/Array/reduce)を使いながらthenを次々に転がすような実装になります。
228
+
229
+
230
+
231
+ ```js
232
+
233
+ const chunk = (arr, size) => arr.reduce((result, it, i) => {
234
+
235
+ if (!result[Math.floor(i / size)]) result[Math.floor(i / size)] = []
236
+
237
+ result[Math.floor(i / size)].push(it)
238
+
239
+ return result
240
+
241
+ }, [])
242
+
243
+
244
+
245
+ const handler = async (event, context, callback) => {
246
+
247
+ const array_1 = ["aaa","bb","cccc"]
248
+
249
+ const limit = 5
250
+
251
+ await chunk(array_1, limit).reduce((promise, arr) => {
252
+
253
+ promise.then(() => Promise.all(
254
+
255
+ arr.map(updateProduct)
256
+
257
+ ))
258
+
259
+ return promise
260
+
261
+ }, Promise.resolve(1))
262
+
263
+ }
264
+
265
+ ```
266
+
267
+
268
+
269
+ まぁ、chunkのアイデアまでは良いと思いますが、
270
+
271
+ reduceは明らかにES5まで退行しているので、
272
+
273
+ 素直に[for...of](https://developer.mozilla.org/ja/docs/Web/JavaScript/Reference/Statements/for...of)を使った方が100倍見栄えは良いでしょう。
274
+
275
+
276
+
277
+ ```js
278
+
279
+ const chunk = (arr, size) => arr.reduce((result, it, i) => {
280
+
281
+ if (!result[Math.floor(i / size)]) result[Math.floor(i / size)] = []
282
+
283
+ result[Math.floor(i / size)].push(it)
284
+
285
+ return result
286
+
287
+ }, [])
288
+
289
+
290
+
291
+ const handler = async (event, context, callback) => {
292
+
293
+ const array_1 = ["aaa","bb","cccc"]
294
+
295
+ const limit = 5
296
+
297
+ for (const arr of chunk(array_1, limit)) {
298
+
299
+ await Promise.all(
300
+
301
+ arr.map(updateProduct)
302
+
303
+ )
304
+
305
+ }
306
+
307
+ }
308
+
309
+ ```
310
+
311
+
312
+
313
+ 最速で行きたいなら
314
+
315
+ stateを使って状態管理した方が良いでしょうね。
316
+
317
+ 状態管理に依存するので使うとするならforEach1個だけで頑張るのが無難ですが、
318
+
319
+ だったらやはりfor...ofでよくね?と感じます。
320
+
321
+
322
+
323
+ まぁ、Babelはasync関数とfor...ofの同時利用を解決出来るか怪しいので、
324
+
325
+ forEachで書けそうなら頑張っても良いと思いますが。
326
+
327
+
328
+
329
+ ```js
330
+
331
+ const waitFor = (ms) => new Promise(resolve) =>
332
+
333
+ const waitUpdate = async (state, limit) => {
334
+
335
+ while (true) {
336
+
337
+ if (state.map(it => it.loading).length < limit) break
338
+
339
+ await waitFor(1000) // リミット件数実行中なら1秒程度待つ
340
+
341
+ }
342
+
343
+ }
344
+
345
+
346
+
347
+ const handler = async (event, context, callback) => {
348
+
349
+ const array_1 = ["aaa","bb","cccc"]
350
+
351
+ const limit = 5
352
+
353
+ const states = array_1.map(str => ({str, loading: false}))
354
+
355
+ for (const state of states) {
356
+
357
+ await waitUpdate(states, limit)
358
+
359
+ state.loading = true
360
+
361
+ updateProduct(state.str).then(() => state.loading = false)
362
+
363
+ }
364
+
365
+ }
366
+
367
+ ```
368
+
369
+
370
+
371
+ 大体こんな感じがゴールになるでしょう。

1

冒頭の解説を追加

2020/03/05 12:55

投稿

miyabi-sun
miyabi-sun

スコア21203

test CHANGED
@@ -1,4 +1,20 @@
1
+ 問題点はシンプルで、async関数直下でしかawait構文は使えません。
2
+
3
+ 入れ子OKにするとでかいasyncメイン関数内ならどこでも使い放題みたいになってコードが崩壊しますからね。
4
+
5
+ なので[Array.prototype.map](https://developer.mozilla.org/ja/docs/Web/JavaScript/Reference/Global_Objects/Array/map)(以下map)内でawaitを使いたければmapに引数もasync関数にしてやる必要があります。
6
+
7
+
8
+
9
+ しかしmapでasync関数を突っ込んでもPromiseの配列になるだけです。
10
+
11
+ なので単純にasync関数を突っ込むだけでは上手く行きません。
12
+
13
+ [Promise.all](https://developer.mozilla.org/ja/docs/Web/JavaScript/Reference/Global_Objects/Promise/all)を使いましょう。
14
+
15
+
16
+
1
- 私はTypeScriptに関してはあまり詳しくないのでJavaScriptで書きます
17
+ 私はTypeScriptに関してはあまり詳しくないのでJavaScriptで書きますが、
2
18
 
3
19
  解説付きコードで表現するとこんな感じです。
4
20
 
@@ -30,7 +46,7 @@
30
46
 
31
47
 
32
48
 
33
- // なのでupdateProductがPromiseを返すならこれでOK
49
+ // もしupdateProductがPromiseを返すならこれでOK
34
50
 
35
51
  // const array_2 = array_1.map(updateProduct)
36
52
 
@@ -46,9 +62,25 @@
46
62
 
47
63
  }
48
64
 
65
+ ```
49
66
 
50
67
 
68
+
69
+ ですが、そもそも`updateProduct`という名称から目的を推測するに、
70
+
71
+ 非同期処理を伴う戻り値Promiseインスタンスですよね?
72
+
73
+ もし違うならawaitで待ちたいとかお前は何を言っているんだ?みたいな状態になってしまいますね。
74
+
75
+
76
+
51
- // 上記を踏まえてシンプルに書くとこんな感じ
77
+ 上記を踏まえてシンプルに書くと
78
+
79
+ 最終形はこんな感じになっていると考えられます。
80
+
81
+
82
+
83
+ ```js
52
84
 
53
85
  const handler = async (event, context, callback) => {
54
86