〔Python〕" AttributeError: 'NoneType' object has no attribute 'find_all' "とエラー表示されてしまった。

Question

前提・実現したい事

お忙しい中ありがとうございます。
今回は『Python ２年生 スクレイピングのしくみ』の本で勉強をしていたら[P.56]の場所で下のようなエラーコードが発生しました。
実現したい事のターミナルみたいに表示したいのですがエラーが表示されてしまいました。

ソースコード

import requests
from bs4 import BeautifulSoup

load_url = "https://news.yahoo.co.jp/categories/it"
html = requests.get(load_url)
soup = BeautifulSoup(html.content, "html.parser")

topic = soup.find(class_="topicsList_main")

for element in topic.find_all("a"):
    print(element.text)

エラーコード

AttributeError: 'NoneType' object has no attribute 'find_all'

実現したい事

告白はSNS 10代の恋愛事情
独禁法 米がGoogle調査へ
昭和感？ 大阪府警の動画話題
成田で搭乗「顔パス」導入へ
スマホに著作権料上乗せ 要請
上場のUber 赤字1100億円
システム障害で診察制限 長崎
仮想通貨 呼称は「暗号資産」

補足情報(現在使用している端末・アプリケーション・バージョンなど)

・Mac OS(Big sur) ・Python 3.9.5 64-bit ・VSCode(最新バージョン) ・Google Chome(最新バージョン)

もしも不備な点がございましたら〔質問への追記・修正依頼〕を宜しくお願い致します。
お忙しい中ありがとうございました。

Answer 1

AttributeError: 'NoneType' object has no attribute 'find_all'

'NoneType' には、'find_all'というアトリビュートは存在しません、といってます。
find_all ってのがくっついてる変数になにが入ってるのか確認してみよう

Comments

[Rwight]

y_waiwai さん回答ありがとうございます。

aタグを全てというふうに指定していますがその部分が間違えているのでしょうか？

[y_waiwai]

いやだから、その変数になにが入ってるのか確認してみようよ
コードは全く読んでません

[udon-ken]

どこで間違えてる（間違えてなく正しい結果というのもありうる）のかわかりませんが、ともかく、
topic = soup.find(class_="topicsList_main")
ここで、topicに代入されたのはNoneであるはずです（だから次の行でNoneにはそういうアトリビュートが無いとエラーが出された）。
ここに問題があるのか、これ以前の段階での問題を引きずってそうなったのか、そもそもNoneになるのが正しいのかは不明です。

[Rwight]

原因が発覚いたしました。
本書ののクラス名は
<.Yahoo! デベロッパー　ツール《旧》 >
<ul class="topicsList_main"><ul>
なのでこの時に実行していれば出来た物でした。
ですが....
現在のYAHOO！は
<ul></ul>でクラス名がない為、
この今回みたいなエラーが発生する事が分かりましたので報告します。
y_waiwai さんと udon-ken さん誠にありがとうございました。
大事な部分が抜けていました。　気づかしてくださってありがとうございました。
(理解が全く出来なくて申し訳ありませんでした。次はちゃんと確認するように致します。)

[udon-ken]

良かったですね。

何らかのメソッドで値を求めた時、値が無ければ（取得に失敗した時）Noneが返ってくるのはよくあることで、それをそのまま処理しようとして今回のようなエラーになるケースは多いです。
あ、、求めるというか、プロパティを参照して中身が入ってない時はNoneとかもあります。

なので、取得に失敗した時にどう処理するかを考えておくことが大事です。
例としてセイウチ演算子使うとこういう感じになります。
topicがTrue（値有り）じゃなければ実行しない。

if topic := soup.find(class_="topicsList_main"):
＿for element in topic.find_all("a"):
＿＿print(element.text)

[Rwight]

本当に今回は大事な事に気づきました。ありがとうございました。

・デベロッパーツールをちゃんと確認をしていなかった事。

が今回の原因でした。
udon-ken さんのコメントも参考にさせていただきます。
本日は本当にありがとうございました。
「y_waiwai」さん　と　「udon-ken」さん
ありがとうございました。