質問編集履歴
4
ごじていせい
test
CHANGED
|
File without changes
|
test
CHANGED
|
@@ -18,7 +18,7 @@
|
|
|
18
18
|
https://danbooru.donmai.us/posts/6655703?q=sylveon 【閲覧注意】
|
|
19
19
|
この作品ページは左上にある「Disable all」を押すことで作品を表示できるようになります。
|
|
20
20
|
|
|
21
|
-
その上で私のやりたいことは、3つ目のURL
|
|
21
|
+
その上で私のやりたいことは、3つ目のURLにあるような、表示を制限されているR18作品は収集しないように設定することです。現状のソースコードでは、表示を制限されている作品であろうとなかろうと収集してしまいます。
|
|
22
22
|
|
|
23
23
|
上記のことを実現するためのお力添えをいただきたいです。よろしくお願い致します。
|
|
24
24
|
|
3
ごじていせい
test
CHANGED
|
File without changes
|
test
CHANGED
|
@@ -16,7 +16,7 @@
|
|
|
16
16
|
|
|
17
17
|
そして、danbooruの特徴として、R18である一部の作品は「Disable all」を押さないと表示されないようになっています。２つ目のURLの次のページは下記のURLであり、表示されない作品ページに該当いたします。
|
|
18
18
|
https://danbooru.donmai.us/posts/6655703?q=sylveon 【閲覧注意】
|
|
19
|
-
この作品は左上にある「Disable all」を押すことで表示できるようになります。
|
|
19
|
+
この作品ページは左上にある「Disable all」を押すことで作品を表示できるようになります。
|
|
20
20
|
|
|
21
21
|
その上で私のやりたいことは、3つ目のURLの作品のように、表示を制限されているR18作品は収集しないように設定することです。現状のソースコードでは、表示を制限されている作品であろうとなかろうと収集してしまいます。
|
|
22
22
|
|
2
ごじていせい
test
CHANGED
|
File without changes
|
test
CHANGED
|
@@ -8,13 +8,13 @@
|
|
|
8
8
|
|
|
9
9
|
|
|
10
10
|
下部に掲示しているソースコードの仕組みについて説明します。
|
|
11
|
-
まず以下のページのhtmlをrequestしたあとに
|
|
11
|
+
まず以下のページのhtmlをrequestしたあとに作品を収集します。
|
|
12
12
|
https://danbooru.donmai.us/posts/6681790?q=sylveon
|
|
13
|
-
その後、nextクラスにある次のページのhtmlをrequestして
|
|
13
|
+
その後、nextクラスにある次のページのhtmlをrequestして作品を収集します。
|
|
14
14
|
https://danbooru.donmai.us/posts/6680502?q=sylveon
|
|
15
|
-
そしてまたnextクラスにある次のページのURLをrequestして
|
|
15
|
+
そしてまたnextクラスにある次のページのURLをrequestして作品を収集するというのを繰り返してスクレイピングを行います。
|
|
16
16
|
|
|
17
|
-
そ
|
|
17
|
+
そして、danbooruの特徴として、R18である一部の作品は「Disable all」を押さないと表示されないようになっています。２つ目のURLの次のページは下記のURLであり、表示されない作品ページに該当いたします。
|
|
18
18
|
https://danbooru.donmai.us/posts/6655703?q=sylveon 【閲覧注意】
|
|
19
19
|
この作品は左上にある「Disable all」を押すことで表示できるようになります。
|
|
20
20
|
|
1
ごじていせい
test
CHANGED
|
File without changes
|
test
CHANGED
|
@@ -1,6 +1,6 @@
|
|
|
1
1
|
### 実現したいこと
|
|
2
2
|
|
|
3
|
-
スクレイピングで画像/動画作品を収集する際、各Webページにアクセスした
|
|
3
|
+
スクレイピングで画像/動画作品を収集する際、各Webページにアクセスした時に、作品が表示される場合は取得し、表示されない場合は取得しないようにしたい。
|
|
4
4
|
|
|
5
5
|
### 前提
|
|
6
6
|
閲覧頂きありがとうございます。
|
|
@@ -15,7 +15,7 @@
|
|
|
15
15
|
そしてまたnextクラスにある次のページのURLをrequestして画像を収集するというのを繰り返してスクレイピングを行います。
|
|
16
16
|
|
|
17
17
|
その際、danbooruの特徴として、R18である一部の作品は「Disable all」を押さないと表示されないようになっています。２つ目のURLの次のページは下記のURLであり、表示されない作品ページに該当いたします。
|
|
18
|
-
https://danbooru.donmai.us/posts/6655703?q=sylveon
|
|
18
|
+
https://danbooru.donmai.us/posts/6655703?q=sylveon 【閲覧注意】
|
|
19
19
|
この作品は左上にある「Disable all」を押すことで表示できるようになります。
|
|
20
20
|
|
|
21
21
|
その上で私のやりたいことは、3つ目のURLの作品のように、表示を制限されているR18作品は収集しないように設定することです。現状のソースコードでは、表示を制限されている作品であろうとなかろうと収集してしまいます。
|