複数のテーブルから､任意のひとつをスクレイピングするには

Question

以下のウェッブページから､テーブルタグをスクレイピングしようと､おもっています｡
統計Web

ページには､複数のテーブルがあります｡

この場合､たとえば､２つ目のテーブルのタグと数値をスクレイピングするには､どのようにしたら良いのでしょう｡

（やってみたこと）

from bs4 import BeautifulSoup
from urllib import request

url ='https://bellcurve.jp/statistics/course/18766.html'
response=request.urlopen(url)
soup=BeautifulSoup(response)
print(soup.table[1])

# 以下エラーメッセージです｡


KeyError                       Traceback (most recent call last)
<ipython-input-62-1e9af06e8d16> in <module>
----> 1 print(soup.table[1])

/Applications/anaconda3/lib/python3.6/site-packages/bs4/element.py in __getitem__(self, key)
   1014         """tag[key] returns the value of the 'key' attribute for the tag,
   1015         and throws an exception if it's not there."""
-> 1016         return self.attrs[key]
   1017 
   1018     def __iter__(self):

KeyError: 1

Answer 1

soup.table の場合、最初に見つかった table タグを取得することになります。
複数ある場合に2番目の table タグを取得したい場合は、findAll("table")[1] とすればよいでしょう。

from bs4 import BeautifulSoup
from urllib import request

url = "https://bellcurve.jp/statistics/course/18766.html"
response = request.urlopen(url)
soup = BeautifulSoup(response)

tables = soup.findAll("table")

print(tables[1])
# <table>
# <tbody>
# <tr><th>毛色</th><th>度数</th></tr>
# <tr><td>白</td><td>27</td></tr>
# <tr><td>黒</td><td>20</td></tr>
# <tr><td>灰色</td><td>18</td></tr>
# <tr><td>オレンジ</td><td>15</td></tr>
# <tr><td>茶トラ</td><td>10</td></tr>
# <tr><td>キジトラ</td><td>7</td></tr>
# <tr><td>サビ</td><td>3</td></tr>
# <tr><td>合計</td><td>100</td></tr>
# </tbody>
# </table>

Comments

[tiitoi]

すいません。重複しました。

[okahijiki]

できましたー｡

Answer 2

こんにちは。

以下でどうでしょう？ (※URLのドメインを、差し障りのないものに変えています。）

from bs4 import BeautifulSoup
from urllib import request

url ='https://example.com/statistics/course/18766.html'
response = request.urlopen(url)
soup = BeautifulSoup(response)
tables = soup.find_all('table')
print(tables[1])

• ** 参考：** Beautiful Soup Documentation find_all

Comments

[okahijiki]

できましたー｡find_allメソッドと､インデックス番号を利用するのですね｡ありがとうございまーす!

[jun68ykt]

どういたしまして。解決されたようで、よかったです。????