質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

1279閲覧

webスクレイピングをして、辞書を作成したいです。

jury_new

総合スコア31

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2020/06/21 05:37

pubgの武器に関するWebスクレイピングを行っています。
実行しても何も出力されずprint関数で辿ろうと思ったのですが変化がなく質問させていただいている次第です。

やりたいこと;
辞書を作成したいです。

辞書の形。
{銃:銃の識別のために0から数値を振り分けたもの}

###該当コード

python

1 2import requests 3from bs4 import BeautifulSoup 4 5url = "https://appmedia.jp/pubg/1847028" 6r = requests.get(url) 7html_soup = BeautifulSoup(r.text,'html.parser') 8 9 10def gan(x): 11 show = '' 12 stwo = '' 13 for base in html_soup.find_all('table',id= {'{}'.format(x)}): 14 print(base) 15 for three in base.find_all('tbody'): 16 for four in three.find_all('td'): 17 final = four.get_text('strong') 18 s = print(final) 19 show += ' ' + str(s) 20 for number in range(0,45): 21 gan = {"{}".format(show):number} 22 stwo = print(gan) 23 return stwo 24 25gan(x='SG') 26 27

##詳細説明
関数の引数になっているのは、銃の種類です。
rangeのループ処理は、武器の個数を数えて44だったため44に識別できると考え上記のようなコードを作成しました。
試しに一つの銃のカテゴリー”sg(ショットガン)”とidで指定してfindall関数でスクレイピングしようとしたのですが中身が取り出せません。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

otn

2020/06/21 06:56

r.text の中身を確認しましょう。
jury_new

2020/06/21 07:25

アドバイスありがとうございます!確認してみます
guest

回答1

0

ベストアンサー

とりあえず、最初のtableを抜き出すところだけ。

id="SG"となっている要素は<h3>であり<table>じゃないので質問のコードでは取得できません。
ではどうすればよいかというと、<h3 id="SG">の要素の次が取得したいtableなのでfind_next_siblings('table')でh3要素の次以降のtable要素を取得(配列になる)し、その一番最初の要素をスクレイピングにかけると良いのでは、と思います。
(after疑似要素が使えれば良いと思うけどまだ未実装らしくて)

python

1base = html_soup.select_one(f'#{x}').find_next_siblings('table') 2for three in base[0].find_all('tbody'): 3 4(以下略)

この後もえらい大変だと思いますが(<strong><b>が混在しているし)頑張ってください。

投稿2020/06/21 07:11

hope_mucci

総合スコア4447

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

jury_new

2020/06/21 07:26

ご回答ありがとうございます! 最初からミスをしていたんですね。再構築してみます。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問