質問編集履歴
1
読みにくかった文章を要約しました
test
CHANGED
|
File without changes
|
test
CHANGED
|
@@ -1,23 +1,13 @@
|
|
|
1
|
-
為替レートのような高頻度で情報が更新される動的サイトからスクレイピングを行いたいです。(APIを提供していないサイト）
|
|
1
|
+
為替レートのような高頻度で情報が自動更新される動的サイトからスクレイピングを行いたいです。(APIを提供していないサイト）
|
|
2
2
|
|
|
3
|
-
あるページを開いていれば継続的に欲しい情報が更新されるため、他のページに移動してリクエストを送信する等の必要もありません。
|
|
4
|
-
|
|
5
|
-
該当のページにアクセスした後は特定の動的要素の
|
|
3
|
+
該当のページにアクセスした後は特定の動的要素のパラメータを確認し継続取得するプログラムです。
|
|
6
4
|
|
|
7
5
|
|
|
8
6
|
|
|
9
|
-
ここで疑問に思ったので
|
|
7
|
+
ここで疑問に思ったのはこのようなスクレイピングの場合、高速で情報を取得してもブラウザが取得したソースコードの読み取り頻度が変わるだけでサーバーに対して頻回にリクエストを送信しておらずサーバー負荷は変わらないのでしょうか？（自分のPCへの負荷が上がるだけ？）
|
|
10
8
|
|
|
11
|
-
このようなスクレイピングの場合、サーバーが提供している現在のパラメータが何かをソースコードから確認しているだけなので
|
|
12
|
-
|
|
13
|
-
極端な話0.1秒ごとに情報を取得しようと1時間毎に情報を取得しようとプログラムによる自分のPCへの負荷は変わるだけで相手のサーバー負荷は変わらないのではないか？と考えました。
|
|
14
|
-
|
|
15
|
-
（
|
|
9
|
+
（ストリーム動画でスクリーンショットをどれだけ高速で行っても配信サイトのサーバーには関係ないイメージ）
|
|
16
10
|
|
|
17
11
|
|
|
18
12
|
|
|
19
|
-
そのページを開いていれば相手への負荷が変わらないのであれば精度の高い情報を取得したいので
|
|
20
|
-
|
|
21
|
-
PCへの負荷と相談しながら取得頻度を上げたいのですがもし動的サイトの仕組みについて誤りがあればご指摘ください。
|
|
22
|
-
|
|
23
|
-
よろしくお願いします。
|
|
13
|
+
ご回答よろしくお願いします。
|