Q&A
python -c 'import setuptools'
としたらどういう結果になりますか?
see https://github.com/pypa/pip/blob/22.0.4/src/pip/_internal/utils/setuptools_build.py#L23
さくらレンタルサーバを（スタンダード）使用しています。
https://notemite.com/python/scraping-with-sakura-rental/
こちらを参考に、
Python 3.9.0 をインストールしました。
pipインストールリスト
pip3 list
Package Version
pip 22.0.4
setuptools 49.2.1
仮想環境のパスに入り起動した後、
% cd scraping_venv
% source bin/activate.csh
pipインストールリスト
(scraping_venv) % pip3 list
Package Version
beautifulsoup4 4.10.0
certifi 2021.10.8
charset-normalizer 2.0.12
idna 3.3
pip 22.0.4
requests 2.27.1
setuptools 60.10.0
soupsieve 2.3.1
urllib3 1.26.9
ここに追加で、lxmlをインストールしようとすると・・・
(scraping_venv) % pip3 install lxml
Collecting lxml
Using cached lxml-4.8.0.tar.gz (3.2 MB)
Preparing metadata (setup.py) ... error
error: subprocess-exited-with-error
× python setup.py egg_info did not run successfully.
│ exit code: 1
╰─> [1 lines of output]
ERROR: Can not execute setup.py since setuptools is not available in the build environment.
[end of output]
note: This error originates from a subprocess, and is likely not a problem with pip.
error: metadata-generation-failed
× Encountered error while generating package metadata.
╰─> See above for output.
note: This is an issue with the package mentioned above, not pip.
hint: See above for details.
以上のメッセージが出てインストールできません。
lxmlのバージョンを指定する必要があるのでしょうか？
ありがとうございます、
以下のように表示されます。
[scraping_venv] % python -c 'import setuptools'
Traceback (most recent call last):
File "<string>", line 1, in <module>
File "/home/aaaaaaaaaa/local/python/lib/python3.8/site-packages/setuptools/__init__.py", line 23, in <module>
from setuptools.dist import Distribution
File "/home/aaaaaaaaaa/local/python/lib/python3.8/site-packages/setuptools/dist.py", line 34, in <module>
from setuptools import windows_support
File "/home/aaaaaaaaaa/local/python/lib/python3.8/site-packages/setuptools/windows_support.py", line 2, in <module>
import ctypes
File "/home/aaaaaaaaaa/local/python/lib/python3.8/ctypes/__init__.py", line 7, in <module>
from _ctypes import Union, Structure, Array
ModuleNotFoundError: No module named '_ctypes'
> Python 3.9.0 をインストールしました。
の全手順を書いた方がよさそうです。ちゃんとビルドできてないか、ビルドした後に壊したか、ビルドしたPythonを使っていないかのように見えます。
ありがとうございます！
以下の手順でPython仮想環境の中でPython 3.8.9をインストールした結果、
lxmlのインストールはできました。
・Python仮想環境venv（ブイエンブ）を作成
python3 -m venv scraping_venv
・仮想環境のパスに移動
cd scraping_venv
・起動
source bin/activate.csh
・ダウンロード用のディレクトリを作成
mkdir -p ~/work/python3
・ディレクトリ移動
cd ~/work/python3
・wget でファイルをダウンロード
wget --no-check-certificate https://www.python.org/ftp/python/3.8.9/Python-3.8.9.tgz
・ファイルを解凍
tar zxf Python-3.8.9.tgz
・ディレクトリ移動
cd ./Python-3.8.9
・インストール
./configure --prefix=$HOME/local/python/ --with-system-ffi LDFLAGS="-L $HOME/local/lib/" CPPFLAGS="-I $HOME/local/include/"
・「make」を実行
make
・「make install」を実行
make install
[scraping_venv] % python -m pip list
Package Version
------------------ ---------
beautifulsoup4 4.10.0
certifi 2021.10.8
charset-normalizer 2.0.12
idna 3.3
lxml 4.8.0
pip 22.0.4
requests 2.27.1
setuptools 49.2.1
soupsieve 2.3.1
urllib3 1.26.9
wheel 0.37.1
ただし、その後、以下を参考に、
https://notemite.com/python/scraping-with-sakura-rental/#bs-html
・コマンド「python」で 起動
(scraping_venv) % python
・requests をインポート
>>> import requests
・BeautifulSoup をインポート
>>> from bs4 import BeautifulSoup
ここで、以下のエラーが出るようになってしまいました。
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "/home/aaaaaaaaaa/scraping_venv/lib/python3.8/site-packages/bs4/__init__.py", line 38, in <module>
from .builder import builder_registry, ParserRejectedMarkup
File "/home/aaaaaaaaaa/scraping_venv/lib/python3.8/site-packages/bs4/builder/__init__.py", line 516, in <module>
from . import _lxml
File "/home/aaaaaaaaaa/scraping_venv/lib/python3.8/site-packages/bs4/builder/_lxml.py", line 16, in <module>
from lxml import etree
File "/home/aaaaaaaaaa/scraping_venv/lxml.py", line 1
mport urllib.request
^
SyntaxError: invalid syntax
そこで、以下のコマンドを実行しても、何も表示されません。
[scraping_venv] % python -c 'import setuptools'
自己解決いたしました。
lxml.pyの記入ミスでした。
申し訳ありません。
自己解決
