python スクレイピング

Question

python2年生スクレイピングという教材で現在勉強しています。
教材にあるコードをそのまま入力し、スクレイピングしようとしましたが、
なぜかエラーコードが出てしまいます。

OSはwindows10です。

教科書の指示通り行っていない点としては、2点あります。
⓵教科書ではpython3をインストールしていますが、
私は今後のためにanaconda2をインストールしています。
(anaconda3がインストール不可だったため。)

⓶教科書ではIDLEというエディタを使用していますが、
私は他サイトで推奨されていたVSCODEを使用しています。

こちらが原因でしょうか。
プログラムを動かすとdownload.textファイルに保存されるはずが、何も保存されていません。
教科書には「response.encoding = response.apparent_encoding」で文字化けを避けれると記載がありましたが、このコードでは不十分なのでしょうか。
大変恐縮ですが、ご教授いただければ幸いです。

import requests

url = "https://www.ymori.com/books/python2nen/test2.html"
response = requests.get(url)

response.encoding = response.apparent_encoding

filename = "download.txt"

f = open(filename, mode="w")

f.write(response.text)

f.close()

Windows PowerShell
Copyright (C) Microsoft Corporation. All rights reserved.

新しいクロスプラットフォームの PowerShell をお試しください https://aka.ms/pscore6

PS C:\Users\miyu\Desktop\mypython> conda activate base
PS C:\Users\miyu\Desktop\mypython> & C:/Users/miyu/Anaconda2/python.exe c:/Users/miyu/Desktop/mypython/scrape.py
Traceback (most recent call last):
  File "c:/Users/miyu/Desktop/mypython/scrape.py", line 12, in <module>
    f.write(response.text)
UnicodeEncodeError: 'ascii' codec can't encode characters in position 72-73: ordinal not in range(128)
PS C:\Users\miyu\Desktop\mypython> 

Comments

[gentaro]

まず教科書の指示に従っていない時点で、問題解決の手がかりをあなたは知っている事になります。
ここに質問する前に「教科書の指示通り」やってみて確認しましょう。

https://teratail.com/help/question-tips#questionTips1-2
「投稿前に検索し、できるところまで自分でやってみましょう」

あなたが指示通りに行っていない事を、自分で手を尽くして調べることもせずに質問をするのは、ただの丸投げでしかありません。

[meg_]

python、requestsのバージョンは何ですか？

[dfmasap]

申し訳ございません。精進します。

Answer 1

import requests
import codecs

url = "https://www.ymori.com/books/python2nen/test2.html"
response = requests.get(url)

response.encoding = response.apparent_encoding

filename = "download.txt"

f = codecs.open(filename, 'w', 'utf-8')

f.write(response.text)

f.close()

※Windows8、Python2.7で動作確認しました。

Comments

[meg_]

質問内容より質問者さんはpython2系をお使いと推測して回答しました。
python3のコードをpython2で動かすには多くの修正が必要となる場合があります。あえてpython2を使うのであれば覚悟のうえご使用ください。

[dfmasap]

お手数おかけいただきありがとうございます。
python2.7.16 64bit:condaを使用しています。
可能であれば、python3を使用したかったのですが、
anaconda3のインストールが何度やってもうまくいかず、
anaconda2を使用しております。
vscodeでpythonのバージョンが選べるということが理解できましたので、
python3を使用する方法を調べ、これからはpython3で行っていこうと思います。
ありがとうございました。