本の通りのコードなのに、スクレイピングできない

Question

前提・実現したいこと

「独習Python入門」をみながら練習しています。
Webスクレイピングのページで、教科書通りのコードを入力しているのですが、エラーが表示されます。

発生している問題・エラーメッセージ

長いですが・・・

Traceback (most recent call last):
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 1317, in do_open
    encode_chunked=req.has_header('Transfer-encoding'))
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 1229, in request
    self._send_request(method, url, body, headers, encode_chunked)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 1275, in _send_request
    self.endheaders(body, encode_chunked=encode_chunked)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 1224, in endheaders
    self._send_output(message_body, encode_chunked=encode_chunked)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 1016, in _send_output
    self.send(msg)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 956, in send
    self.connect()
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/http/client.py", line 1392, in connect
    server_hostname=server_hostname)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/ssl.py", line 412, in wrap_socket
    session=session
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/ssl.py", line 853, in _create
    self.do_handshake()
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/ssl.py", line 1117, in do_handshake
    self._sslobj.do_handshake()
ssl.SSLCertVerificationError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:1051)

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "do_scraping.py", line 5, in <module>
    req = urllib.request.urlopen('http://quality-start.in/company/')
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 222, in urlopen
    return opener.open(url, data, timeout)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 531, in open
    response = meth(req, response)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 641, in http_response
    'http', request, response, code, msg, hdrs)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 563, in error
    result = self._call_chain(*args)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 503, in _call_chain
    result = func(*args)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 755, in http_error_302
    return self.parent.open(new, timeout=req.timeout)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 525, in open
    response = self._open(req, data)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 543, in _open
    '_open', req)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 503, in _call_chain
    result = func(*args)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 1360, in https_open
    context=self._context, check_hostname=self._check_hostname)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/urllib/request.py", line 1319, in do_open
    raise URLError(err)
urllib.error.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:1051)>

該当のソースコード

#encoding: utf-8

import urllib.request
from bs4 import BeautifulSoup
req = urllib.request.urlopen('http://quality-start.in/company/')
soup = BeautifulSoup(req, "html.parser")
print(soup.find('h1').text)

試したこと

①何度もコードを見直しましたが、まさしく教科書通りでした。
（エラーメッセージ的に、単なる誤入力ではない？）

②[SSL: CERTIFICATE_VERIFY_FAILED]　というエラーメッセージで検索して、
https://qiita.com/orangain/items/0a641d980019fd7e0c52
を参考に、certifiモジュールをインストールしました。

しかし、エラーのままです・・・

補足情報（FW/ツールのバージョンなど）

MacOS
pip9.0.1

質問者がプログラミング初心者のため、基本的なミスかもしれませんが、お助けください！

Comments

[can110]

参考ページはpythonバージョン3.6用に書かれているようです。
「試したこと」で、実際におこなった手順を記載ください。

[tiitoi]

セキュリティ的な観点でBESTな解決法ではないかもしれませんが、SSL 認証を無効にする方法もあるようです。
https://shinespark.hatenablog.com/entry/2015/12/06/100000

[RinKawakami]

ありがとうございます！
ご指摘の通り、「Python3.6」についてcerifiモジュールをダウンロードしていたため、
/Applications/Python\ 3.7/Install\ Certificates.command
というように、
「3.6」→「3.7」とすることで、解決しました！

解決策の実行には、バージョンを確認する必要があるんですね…！

Answer 1

参考ページはpythonバージョン3.6用に書かれているようです。
当方mac環境はわからず動作未検証ですが3.7環境だと
/Applications/Python\ 3.7/Install\ Certificates.commandと実行すべきかと思います。

Answer 2

req = urllib.request.urlopen('https://quality-start.in/company/')

http=>httpsにしてみてください

Comments

[RinKawakami]

ありがとうございます。
試してみましたが、ダメでした…。

[yamato_user]

https://teratail.com/questions/160099

マック特有のエラーっぽい。。。らしい。。。

[RinKawakami]

ありがとうございます！
自分がダウンロードしていたcertifiモジュールは、別の方のご指摘の通り、Python3.6について行なっていました。
同様の手続きを、「3.7」に書き換えて行なったところ、できるようになりました！

素早いご回答ありがとうございました！