【Python】csvファイルにスクレイピングしたデータを保存したい

Question

前提・実現したいこと

スクレイピングでデータを取得し、1つのサイト毎に1つのcsvファイル名を'Url名.csv'のように付け、そのファイルにデータを保存したいです。

例えば、https://nar.sp.netkeiba.com/odds/?race_id=201942021401のデータを'https://nar.sp.netkeiba.com/odds/?race_id=201942021401.csv'というファイルに保存し、https://nar.sp.netkeiba.com/odds/?race_id=201942021402のデータを'https://nar.sp.netkeiba.com/odds/?race_id=201942021401.csv'というファイルに保存する、という感じです。

宜しくお願いします。

該当のソースコード

from selenium import webdriver
import time
import csv
import pandas as pd
import numpy as np


def numStr(num):
    if num >= 10:
        return str(num)
    else:
        return '0' + str(num)

driver = webdriver.Chrome()

Base = 'https://nar.sp.netkeiba.com/odds/?race_id=2019420214'

for i in range(1, 3):

    Url = Base + numStr(i)

    driver.get(Url)

    try:
        for l in range(2, 14):

            odds = driver.find_element_by_xpath(('//*[@id="Netkeiba_Race_OddsView"]/div[1]/div/div/div[7]/table/tbody/tr[{}]/td[5]/span').format(l)).text

            with open('ここにcsvファイルの名前を入れる', 'a', encoding='utf-8') as f:
                 writer = csv.writer(f, lineterminator='\n')
                 writer.writerow([odds])
            

    except:
           pass

driver.quit()

Comments

[meg_]

OSは何ですか？ Windowsの場合、ファイル名に/などは使えません。

[退会済みユーザー]

OSはWindows10です。
ファイル名が被らなければ良いので、Urlの数字部分でも構いません。
どうか宜しくお願いします。

Answer 1

ファイル名が被らなければ良いので、Urlの数字部分でも構いません。

URLとidの数字部分を別の変数にすると管理しやすいです。

Base = 'https://hoge.com/?id='
Id_base = '2019420214'
for i in range(1, 3):
    Id = Id_base + numStr(i)
    Url = Base + Id
    try:
        for l in range(2, 14):
            with open(Id + '.csv', 'a', encoding='utf-8') as f:

Comments

[退会済みユーザー]

出来ました！
ありがとうございます！