質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

文字コード

文字コードとは、文字や記号をコンピュータ上で使用するために用いられるバイト表現を指します。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

2回答

4130閲覧

pythonの文字コード変換ができない...

Koh_

総合スコア27

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

文字コード

文字コードとは、文字や記号をコンピュータ上で使用するために用いられるバイト表現を指します。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

1クリップ

投稿2018/01/15 13:51

当方python初心者です。
htmlをrequestsを用いてダウンロードしようとしていますが,文字コード変換がうまくいかず,ダウンロードしたファイルが文字化けします。
htmlはutf-8で記述されており,ideのpyscriperで表示する分には問題ないのですが,ファイルに書き込むと文字化けして(文字コードがutf-8ではなくなっている?)読めません。

調べた結果,日本語を扱うときは,
①入力の際にunicodeに変換
②unicodeで文字列処理
③出力の際に文字コードを指定
すればよいとわかりましたが,どのように変換すればよいかわからず,うまくいかないので質問させていただきました。
どなたかご教授ください。

python

1# coding:utf-8 2import requests 3 4url="https://www.suruga-ya.jp/product/detail/WO10669" 5data=requests.get(url) 6print(data.text) 7print(data.encoding) 8f=open("text.htm","w") 9f.write(data.text) 10f.close()

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答2

0

ベストアンサー

Python

1# -*- coding: utf-8 -*- 2import requests 3 4 5def main(): 6 url = "https://www.suruga-ya.jp/product/detail/WO10669" 7 res = requests.get(url) 8 print(res.text) 9 print(res.encoding) 10 with open("text.htm", "w", encoding=res.encoding) as f: 11 f.write(res.text) 12 f.close() 13 14 15if __name__ == '__main__': 16 main() 17

■余談
1,スクレイピングで取得したデータは特別な理由がなければ、
バイナリデータとして扱うと後で取り回しが効きます。
2,相手サーバーに頻繁にアクセスするのを防ぐためにtime.sleepやキャッシュを作成してくださいな。

投稿2018/01/15 15:01

umyu

総合スコア5846

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

0

つf = codecs.open('text.htm', 'w', 'utf-8')

投稿2018/01/15 13:59

hichon

総合スコア5737

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問