回答編集履歴
1
補足
test
CHANGED
|
@@ -6,7 +6,7 @@
|
|
|
6
6
|
|
|
7
7
|
|
|
8
8
|
|
|
9
|
-
|
|
9
|
+
個人的に一番難しいと思うのはリクエスト制限ですかね
|
|
10
10
|
|
|
11
11
|
たとえば、情報が10000件あった場合、1ページに10000件の情報が載っていれば1回のリクエストで全件とれます。
|
|
12
12
|
|
|
@@ -15,3 +15,7 @@
|
|
|
15
15
|
※まぁいろんなサーバから少しずつやればとれますけどね...。
|
|
16
16
|
|
|
17
17
|
※ただし、安易にリクエスト制限をつけると、本来のユーザや正規のボットも弾いてしまうので気をつけてください。
|
|
18
|
+
|
|
19
|
+
|
|
20
|
+
|
|
21
|
+
なお、スクレイピング対策しすぎると、SEO的によくない可能性もあるかもですね...
|