連続してページを取得してエクセル等に保存したい

Question

1ページのurlのタイトルを取得することはできるのですが連続しての取得の仕方がわかりません。また出たデータを保存したいです。

コード
import requests, bs4
res = requests.get('https://journals.sagepub.com/toc/trjc/88/1')
res.raise_for_status()
soup = bs4.BeautifulSoup(res.text, "html.parser")
elems = soup.select('.heading-title')
for elem in elems:
    print(elem.text)

https://journals.sagepub.com/toc/trjc/88/2
https://journals.sagepub.com/toc/trjc/88/3

とurlを取得していきたいです。
よろしくお願いいたします。

Answer 1

1ページのurlのタイトルを取得することはできるのですが連続しての取得の仕方がわかりません。

ループを使いましょう

また出たデータを保存したいです。

リストに格納しましょう

import requests, bs4

result = []
for num in range(1,4):
    res = requests.get(f'https://journals.sagepub.com/toc/trjc/88/{num}')
    res.raise_for_status()
    soup = bs4.BeautifulSoup(res.text, "html.parser")
    elems = soup.select('.heading-title')
    for elem in elems:
        result.append(elem.text)
print(result)

Comments

[zen913]

ありがとうございます！！！