twitter トレンド スクレイピング

Question

前提・実現したいこと

pythonのbeautiful soupを使ってtwitterのトレンドをスクレイピングしたいです

発生している問題・エラーメッセージ

NULL見つからない

エラーメッセージ

```python
from bs4 import BeautifulSoup
import requests
import re
url = "https://twitter.com/explore/tabs/trending"

r = requests.get(url)

r.encoding = r.apparent_encoding

soup = BeautifulSoup(r.text, "html.parser")

topic = soup.find("div", class_ ="css-901oao css-16my406 r-poiln3 r-bcqeeo r-qvutc0")

print(topic)

ソースコード

試したこと

twiiter apiを使ってみた(403エラーが出たため失敗

補足情報（FW/ツールのバージョンなど）

Comments

[meg_]

> twiiter apiを使ってみた(403エラーが出たため失敗
API使うべきかと思いますがそちらのコードはどんなコードでしょうか？

Answer 1

Twitterサービス利用規約では明示的に無許可のスクレイピングは禁止されています。
Twitterサービス利用規約

ユーザーは、本サービスへのアクセスまたはその使用中に、次のいずれも行ってはなりません。

（中略）
(iii)Twitterから提供される（かつ該当する利用条件に従う場合にのみ提供される）、当社の現在利用可能な公開インターフェース以外の方法（自動プログラムか否かを問わない）で、本サービスへのアクセスもしくはその探索またはアクセスもしくは探索の試み（ただし、Twitterとの個別契約で特に許可されている場合は除く）（注：本サービスへのクローリングは、robots.txtファイルの定めによる場合は認められていますが、Twitterによる事前の同意がないまま本サービスのスクレイピングをすることは明示的に禁止されています）