Pythonスクレイピング：'NoneType' object is not subscriptableのエラーについて

Question

前提

Pythonでスクレイピングを行っています。
(社内用のためurlは一部変更しています。)

ライブラリ：selenium

発生している問題・エラーメッセージ

昨日の日付のみそれ以降の処理に進むということをしたいのですが、正規表現のところで引っかかっています。。

エラー文

  File "/Users/myname/Desktop/file/vscode/f_rescue.py", line 46, in <module>
    cfm_date = str2date(cfm_date_str)
  File "/Users/myname/Desktop/file/vscode/f_rescue.py", line 12, in str2date
    tar_date = datetime(int(result[1]), int(result[2]), int(result[3]))
TypeError: 'NoneType' object is not subscriptable

エラー箇所

<line 46>
cfm_date = str2date(cfm_date_str)

<line 12>
tar_date = datetime(int(result[1]), int(result[2]), int(result[3]))

一応ブラウザの動きを見ると、

# 遷移したページ内の投稿日を確認
table_striped_box = driver.find_elements_by_css_selector(".table > tbody > tr")

このページまでは遷移します。

該当のソースコード

from selenium import webdriver
import time
import csv
import re
from datetime import datetime, date, timedelta
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.chrome.options import Options


def str2date(date_str):
        result = re.search(r'(\d{4}).(\d{2}).(\d{2}).', date_str) 
        tar_date = datetime(int(result[1]), int(result[2]), int(result[3]))
        return tar_date

def is_yesterday(tar_date):
        now = datetime.now()
        yesterday = now - timedelta(days=1)
        yesterday_str = datetime.strftime(yesterday, '%Y-%m-%d')
        tar_date_str = datetime.strftime(tar_date, '%Y-%m-%d')

        return tar_date_str == yesterday_str


# driver = webdriver.Chrome('/usr/local/bin/chromedriver',chrome_options=options)
driver = webdriver.Chrome('/usr/local/bin/chromedriver')
driver.get('https://xxx.com/admin/admin/user/login')

# ID/PASSを入力
id = driver.find_element_by_id("xxx")
id.send_keys("xxx")
password = driver.find_element_by_id("xxx")
password.send_keys("xxx")

time.sleep(1)

# ログインボタンをクリック
login_button = driver.find_element_by_css_selector("button.btn")
login_button.click()

# サイト内で特定のページに遷移
driver.get('https://xxx.com/admin/order')
# 遷移したページ内の投稿日を確認
table_striped_box = driver.find_elements_by_css_selector(".table > tbody > tr")

for table_striped in table_striped_box:
    cfm_date_str = table_striped.find_elements_by_css_selector("td")[2].text
    cfm_date = str2date(cfm_date_str)
    print(cfm_date)
#     if is_yesterday(cfm_date):
#         print('cfm_date_str')

試したこと

#プリントで確認
print(cfm_date_str)

2020.09.08
2020.09.08
2020.09.08
2020.09.07
2020.09.07
2020.09.06

実現したいこと

コードの一番下にコメントアウトで記載している

if is_yesterday(cfm_date):
     print('cfm_date_str')

でprint('cfm_date_str')部分を実際の処理に変更し、昨日の日付のもののみこの処理を行うようにしたいです。

アドバイスいただけますと幸いです。
よろしくお願いいたします。

Comments

[nto]

どこでエラーが生じたという事なのでしょうか？

[gomasan]

大変失礼いたしました。エラー箇所の記載が抜けておりました。追記いたしました。

Answer 1

正規表現の最後のdotが1個余計でした。

import re
from datetime import datetime

def str2date(date_str):
        result = re.search(r'(\d{4}).(\d{2}).(\d{2})', date_str) 
        tar_date = datetime(int(result[1]), int(result[2]), int(result[3]))
        return tar_date
cfm_date_str = "2020.09.08"
print(str2date(cfm_date_str))  # -> 2020-09-08 00:00:00

Comments

[gomasan]

ありがとうございます！！無事昨日の日付だけ抽出できました、、気がついてくださりありがとうございます。とても助かりました。