【python】スクレイピングでのエラー原因について

Question

Webスクレイピングを行う際に、正常にデータは取得できるのですが以下のエラーが出ました。
原因を教えてください。

[0509/152109.212:ERROR:ssl_client_socket_impl.cc(946)] handshake failed; returned -1, SSL error code 1, net_error -100
[0509/152110.737:ERROR:ssl_client_socket_impl.cc(946)] handshake failed; returned -1, SSL error code 1, net_error -100

動かしたコードは以下の通りです。

URL      = "http://toriizaka46.jp" # <= ここにスクレイピングしたい対象URLを書いてください
Selector = "h3.article-title"  # <= ここにスクレイピングしたい対象のCSSセレクタを書いてください

# 必須
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By
from bs4 import BeautifulSoup
import csv

# Selenium用オプション
op = Options()
op.add_argument("--disable-gpu");
op.add_argument("--disable-extensions");
op.add_argument("--proxy-server='direct://'");
op.add_argument("--proxy-bypass-list=*");
op.add_argument("--start-maximized");
op.add_argument("--headless");
driver = webdriver.Chrome(chrome_options=op)

# Seleniumでサイトアクセス
# スクレイピングしたい対象が描写されるまでWait
# time.sleep()はご法度！指定した時間待っても描写されない事はままあるので。
driver.get(URL)
WebDriverWait(driver, 30).until(
    EC.presence_of_element_located((By.CSS_SELECTOR, Selector))
)

soup = BeautifulSoup(driver.page_source, features="html.parser")
el = soup.select(Selector)

# 配列の作成。
csvlist = [["","ニュースリスト"]]
num = 0
for news_txt in el:
    news_txt = news_txt.text
    csvlist.append([num, news_txt])
    num += 1

# CSVファイルを開く。ファイルがなければ新規作成する。
f = open("output.csv", "w")
writecsv = csv.writer(f, lineterminator='\n')

# 出力
writecsv.writerows(csvlist)

# CSVファイルを閉じる。
f.close()

よろしくお願いいたします。

Answer 1

以下の回答ページを参考にしてください
stackoverflow

具体的には下記です

op.add_argument('--ignore-certificate-errors')
op.add_argument('--ignore-ssl-errors')

Comments

[ryo_15130724]

ありがとうございます。
無事エラーなく終了できました。

[kankan0]

う～ん、このオプション設定してもエラー出続けますね。
なんででしょ？
[12572:13996:0518/222947.843:ERROR:ssl_client_socket_impl.cc(947)] handshake failed; returned -1, SSL error code 1, net_error -100