質問編集履歴
4
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -1,7 +1,7 @@
|
|
|
1
1
|
pythonにてスクレイピングによる演習をしていたところ、下記のようなレスポンスがありました。
|
|
2
2
|
|
|
3
3
|
```ターミナル
|
|
4
|
-
|
|
4
|
+
<span class="logo-neartext">Website Firewall</span>
|
|
5
5
|
```
|
|
6
6
|
特に連続的なスクレイピングをしたわけではないのですが、これは攻撃とみなされ拒否されてしまったのでしょうか？
|
|
7
7
|
だとしたら、サイトに対してどうにかして連絡を取り、謝罪等した方が良いのでしょうか？
|
3
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -1,21 +1,8 @@
|
|
|
1
|
-
pythonにてスクレイピングによる
|
|
1
|
+
pythonにてスクレイピングによる演習をしていたところ、下記のようなレスポンスがありました。
|
|
2
2
|
|
|
3
3
|
```ターミナル
|
|
4
|
-
<span class="logo-neartext">Website Firewall</span>
|
|
4
|
+
p<span class="logo-neartext">Website Firewall</span>
|
|
5
5
|
```
|
|
6
6
|
特に連続的なスクレイピングをしたわけではないのですが、これは攻撃とみなされ拒否されてしまったのでしょうか？
|
|
7
7
|
だとしたら、サイトに対してどうにかして連絡を取り、謝罪等した方が良いのでしょうか？
|
|
8
|
-
初めての経験で不安になり質問させて頂きました。
|
|
8
|
+
初めての経験で不安になり質問させて頂きました。
|
|
9
|
-
|
|
10
|
-
お二方、早速のアドバイスありがとうございます。
|
|
11
|
-
実際には１つの要素を取得する、若しくは連続して取得する時でも、time.sleepを使い10秒感覚を開け、実行していました。
|
|
12
|
-
|
|
13
|
-
現実問題として、これにより法的措置が取られる可能性はあるのでしょうか？
|
|
14
|
-
|
|
15
|
-
追記
|
|
16
|
-
robots.txtはスクレイピング前にきっちりと確認にスクレイピングが禁止されてない事を確認しました。
|
|
17
|
-
|
|
18
|
-
また、一点分からないのは、soup.find_all（'span'）を実行すると、前述の内容が返ってくるだけど、別の要素は普通に取得出来るという点です。
|
|
19
|
-
この辺りについて分かる方はいらっしゃいますでしょうか？
|
|
20
|
-
|
|
21
|
-
また、例の図書館の事件ではサイト自体に過大な負荷が掛かり、アクセスが出来なくなったとありますが、今回は当然ながら、そのような事態にはなっていないです。
|
2
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -10,4 +10,12 @@
|
|
|
10
10
|
お二方、早速のアドバイスありがとうございます。
|
|
11
11
|
実際には１つの要素を取得する、若しくは連続して取得する時でも、time.sleepを使い10秒感覚を開け、実行していました。
|
|
12
12
|
|
|
13
|
-
現実問題として、これにより法的措置が取られる可能性はあるのでしょうか？
|
|
13
|
+
現実問題として、これにより法的措置が取られる可能性はあるのでしょうか？
|
|
14
|
+
|
|
15
|
+
追記
|
|
16
|
+
robots.txtはスクレイピング前にきっちりと確認にスクレイピングが禁止されてない事を確認しました。
|
|
17
|
+
|
|
18
|
+
また、一点分からないのは、soup.find_all（'span'）を実行すると、前述の内容が返ってくるだけど、別の要素は普通に取得出来るという点です。
|
|
19
|
+
この辺りについて分かる方はいらっしゃいますでしょうか？
|
|
20
|
+
|
|
21
|
+
また、例の図書館の事件ではサイト自体に過大な負荷が掛かり、アクセスが出来なくなったとありますが、今回は当然ながら、そのような事態にはなっていないです。
|
1
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -5,4 +5,9 @@
|
|
|
5
5
|
```
|
|
6
6
|
特に連続的なスクレイピングをしたわけではないのですが、これは攻撃とみなされ拒否されてしまったのでしょうか？
|
|
7
7
|
だとしたら、サイトに対してどうにかして連絡を取り、謝罪等した方が良いのでしょうか？
|
|
8
|
-
初めての経験で不安になり質問させて頂きました。
|
|
8
|
+
初めての経験で不安になり質問させて頂きました。
|
|
9
|
+
|
|
10
|
+
お二方、早速のアドバイスありがとうございます。
|
|
11
|
+
実際には１つの要素を取得する、若しくは連続して取得する時でも、time.sleepを使い10秒感覚を開け、実行していました。
|
|
12
|
+
|
|
13
|
+
現実問題として、これにより法的措置が取られる可能性はあるのでしょうか？
|