python スクレイピング できない

Question

python初心者です

IDLEを使用して、スクレイピングを実行すると

Traceback (most recent call last):
File "/Users/user/Documents/test.py", line 2, in <module>
from bs4 import BeautifulSoup
ModuleNotFoundError: No module named 'bs4'

こういったエラーが出ます
sudo pip3 install beautifulsoup4
sudo pip3 install bs４
で正常にこの二つはインストールされています

いろいろ調べてみたのですが、もしかするとインストールに使用したpythonと実行に使用しているpythonのversionが異なっているかもしれません。

その場合のpythonのversionを揃える方法が知りたいです。

言葉足らずかもしれないので、その際はご指摘ください。

import urllib.request
from bs4 import BeautifulSoup


class Scraper:
    def __init__(self,site):
        self.site = site

    def scrape(self):
        r = urllib.request.urlopen(self.site)
        html = r.read()
        parser = "html.perser"
        sp = BeautifulSoup(html,parser)
        for tag in sp.find_all("a"):
            url = tag.get("href")
            if url is None:
                continue
            if "html" in url:
                print("\n" + url)

news = "https://news.google.com/"
Scraper(news).scrape()

Comments

[coco_bauer]

「No module named 'bs4'」と言われるのは、bs4がインストールされていないからだと思います。
「bs4なんて名前のモジュールは無い！」というエラーなのですから。

「この二つはインストールされています」というのは、どのようにして確認したのでしょうか？

[sekiryuuuu__uu]

pip list で確認したところ

beautifulsoup4 4.9.3
bs4 0.0.1

このようにちゃんと確認はできるんです、、。

Answer 1

モジュールの名称と名前が異なることがあります。
たとえば、Pillow というモジュールは 'from PIL import Image' と使います。ですので、

$ pip install PIL

では、インストールできません。

$ pip install Pillow

と正しいモジュール名を指定する必要があります。ちなみにモジュールの名称は、大文字小文字は区別しないので、 pillow でも大丈夫です。

ということで、私は BeautifulSoup4 は知っていましたが、 bs4 というモジュールがなにか知らなかったので調べました。(pypi.orgで)

This is a dummy package managed by the developer of Beautiful Soup to prevent name squatting. The official name of PyPI’s Beautiful Soup Python package is beautifulsoup4. This package ensures that if you type pip install bs4 by mistake you will end up with Beautiful Soup.

とありました。ということで、まず、このモジュールはいらない。
（余談ですが、これに引っかかっている時点で不安を感じる。）

Windows を使用していて、そこに Python をインストールして、 IDEL というアイコンをクリックして実行しているのですよね？（環境を一切書いていないので、わからない。はじめ、 IDEL ってなんだ？って思いました。）

なのに、 sudo を使ってインストールしているって、どういうことですか？ Windows に sudo というコマンドはありません。UNIX には sudo コマンドがありますので、もしかして Windows Subsystem on Linux にある python に package をインストールしているのかな？（これも環境が書いていないのでわからない。）

バージョンを揃えるやりかたを教えてください。

言っている、意味がわからない。異なるバージョンではなく、異なる環境ではないですか？
venv: Python 仮想環境管理 を読んで理解してください。 virtual environment とはなにか、の説明が書いてあって、よい記事です。

Beautifulsoup4 がある環境で、その test.py を実行すれば動きます。

これ以上、この質問に答えることができません。
答えたら、スクレイピング とか Beautifulsoup4 などとの関係が、一切なくなりますから。（質問の題名と内容を変えてほしい。）

python初心者です

パソコン初心者の間違いではないでしょうか？

Answer 2

python --version
もしくは
python3 --version
でバージョンが表示されます。
また
pip3 --version
pythonのバージョンを含む表示がされると思います。

pip3を使っているところから考えると、python3系で実行したいはずですので、python3 xx.pyで実行すると動くかもしれません。

Answer 3

仮想環境をお勧めします。
venv --- 仮想環境の作成

$ python3 -m venv ./venv
$ source ./venv/bin/activate
$ pip3 install beautifulsoup4
$ pip3 install lxml
$ python -m idlelib.idle

Answer 4

その場合のpythonのversionを揃える方法が知りたいです。

複数のPythonをインストールしているのにそれを適切に使い分けられないと言うことなら、1つを残して他のPythonを全部アンインストールして、それから最初からやれば良いです。

それでもよく分からないと言うことであれば、Python関係を全部アンインストールして、1つだけPythonをインストールすれば良いです。

Comments

[sekiryuuuu__uu]

pythonが現在どれだけインストールされているのか確認するコマンドはありますか。

[otn]

find / -type f -name python -print
で、ディスク全体の中を探して、pythonという名前のファイルが表示されます。

[otn]

アンインストールするのは、どうやってインストールしたのか分かってないと出来ませんが、大丈夫でしょうか？