質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
86.02%
Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

pandas

Pandasは、PythonでRにおけるデータフレームに似た型を持たせることができるライブラリです。 行列計算の負担が大幅に軽減されるため、Rで行っていた集計作業をPythonでも比較的簡単に行えます。 データ構造を変更したりデータ分析したりするときにも便利です。

Q&A

解決済

スクレイピング初歩で躓いています。。。

eqeqe
eqeqe

総合スコア15

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

pandas

Pandasは、PythonでRにおけるデータフレームに似た型を持たせることができるライブラリです。 行列計算の負担が大幅に軽減されるため、Rで行っていた集計作業をPythonでも比較的簡単に行えます。 データ構造を変更したりデータ分析したりするときにも便利です。

1回答

0グッド

2クリップ

906閲覧

投稿2022/04/04 14:41

入門ページを見てやってみたのですが、早速つまずいてしましました。

import pandas as pd
url = 'https://finance.yahoo.com/quote/AAPL/history?p=AAPL&.tsrc=fin-srch'
data = pd.read_html(url, header = 0)

と打っても

Traceback (most recent call last):
File "<pyshell#7>", line 1, in <module>
data = pd.read_html(url, header = 0)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\util_decorators.py", line 299, in wrapper
return func(*args, **kwargs)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\html.py", line 1085, in read_html
return _parse(
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\html.py", line 893, in _parse
tables = p.parse_tables()
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\html.py", line 213, in parse_tables
tables = self._parse_tables(self._build_doc(), self.match, self.attrs)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\html.py", line 732, in _build_doc
raise e
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\html.py", line 713, in _build_doc
with urlopen(self.io) as f:
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\site-packages\pandas\io\common.py", line 195, in urlopen
return urllib.request.urlopen(*args, **kwargs)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 222, in urlopen
return opener.open(url, data, timeout)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 531, in open
response = meth(req, response)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 640, in http_response
response = self.parent.error(
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 569, in error
return self._call_chain(*args)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 502, in _call_chain
result = func(*args)
File "C:\Users\■■■■\AppData\Local\Programs\Python\Python38\lib\urllib\request.py", line 649, in http_error_default
raise HTTPError(req.full_url, code, msg, hdrs, fp)
urllib.error.HTTPError: HTTP Error 404: Not Found

となってしまいます。

pandas
lxml
html5lib
bs4

はインストールしています。

初歩の初歩で一回目でつまずいて情けない限りですが、エラーを検索しても404じゃないかとのことですが、
https://finance.yahoo.com/quote/AAPL/history?p=AAPL&.tsrc=fin-srch は存在しています。
何がいけないのでしょうか…

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

下記のような質問は推奨されていません。

  • 質問になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

適切な質問に修正を依頼しましょう。

meg_

2022/04/04 15:22

>入門ページ 書籍でしょうか?

回答1

1

ベストアンサー

Yahoo Terms of Serviceには

You must not misuse or interfere with the Services or try to access them using a method other than the interface and the instructions that we provide.

とありますのでスクレイピングは禁止されているのではないでしょうか?
サイト側で拒否されているのかもしれません。

投稿2022/04/04 15:33

meg_

総合スコア9898

eqeqe👍を押しています

下記のような回答は推奨されていません。

  • 質問の回答になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

このような回答には修正を依頼しましょう。

回答へのコメント

eqeqe

2022/04/04 16:32

ありがとうございます…入門ページは個人が書いてる入門サイトのようです。 そうなんですか…昔の記事でもう今はできなくなってしまったとかですかね。
eqeqe

2022/04/04 16:34

他のページだと出来たのでやはりおっしゃる感じのようです、改めてありがとうございました!
meg_

2022/04/04 16:35 編集

スクレイピングを禁止しているサイトではAPIが用意されている場合があります。情報が必要であればAPIが利用できないか調べるのが良いかと思います。 スクレイピングされる際には利用規約を読まれることをお勧めします。

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
86.02%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

pandas

Pandasは、PythonでRにおけるデータフレームに似た型を持たせることができるライブラリです。 行列計算の負担が大幅に軽減されるため、Rで行っていた集計作業をPythonでも比較的簡単に行えます。 データ構造を変更したりデータ分析したりするときにも便利です。