scrapyの実行エラー

Question

scrapyでプロジェクトを作成した後、crawlを実行しようとしたのですが、下記のようなエラーが出ました。青空文庫のあるhtmlのタイトルタグを抽出するプログラムなのですが、解決方法がわかる方、教えていただけると嬉しいです。

import scrapy


class SosekiSpider(scrapy.Spider):
    name = 'soseki'
    start_urls = [
        'https://www.aozora.gr.jp/index_pages/person148.html'
    ]

    def parse(self, response):
        title = response.css('title')
        print(title.extract())

エラー
(base) C:\Users\rin20\PycharmProjects\pythonProject1\soseki_list\soseki_list\spiders>scrapy crawl soseki --nolog
Unhandled error in Deferred:

Traceback (most recent call last):
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\crawler.py", line 192, in crawl
return self._crawl(crawler, *args, **kwargs)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\crawler.py", line 196, in _crawl
d = crawler.crawl(*args, **kwargs)
File "C:\Users\rin20\anaconda3\lib\site-packages\twisted\internet\defer.py", line 1613, in unwindGenerator
return _cancellableInlineCallbacks(gen)
File "C:\Users\rin20\anaconda3\lib\site-packages\twisted\internet\defer.py", line 1529, in _cancellableInlineCallbacks
_inlineCallbacks(None, g, status)
--- <exception caught here> ---
File "C:\Users\rin20\anaconda3\lib\site-packages\twisted\internet\defer.py", line 1418, in _inlineCallbacks
result = g.send(result)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\crawler.py", line 87, in crawl
self.engine = self._create_engine()
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\crawler.py", line 101, in _create_engine
return ExecutionEngine(self, lambda : self.stop())
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\core\engine.py", line 69, in init
self.downloader = downloader_cls(crawler)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\core\downloader_init.py", line 83, in init
self.middleware = DownloaderMiddlewareManager.from_crawler(crawler)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\middleware.py", line 53, in from_crawler
return cls.from_settings(crawler.settings, crawler)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\middleware.py", line 35, in from_settings
mw = create_instance(mwcls, settings, crawler)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\utils\misc.py", line 167, in create_instance
instance = objcls.from_crawler(crawler, *args, **kwargs)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\downloadermiddlewares\robotstxt.py", line 36, in from_crawler
return cls(crawler)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\downloadermiddlewares\robotstxt.py", line 32, in init
self._parserimpl.from_crawler(self.crawler, b'')
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\robotstxt.py", line 124, in from_crawler
o = cls(robotstxt_body, spider)
File "C:\Users\rin20\anaconda3\lib\site-packages\scrapy\robotstxt.py", line 116, in init
from protego import Protego
builtins.ModuleNotFoundError: No module named 'protego'

Answer 1

私もwindows10 anaconda環境で
プロンプトでconda install scrapyでインストールしましたが、
builtins.ModuleNotFoundError: No module named 'protego'と同じように最後にでてつまりましたが、protegoのモジュールが見つからないならインストールすればいいのではとおもって
conda install protego
をやったら普通に動きました。
上のpythonもコピペしてコマンドscrapy crawl soseki自分の環境で表示されました。
僕は初心者なので他の方の意見があればそちらを優先したほうがいいと思いますが解答がないようなので書いときます。

Comments

[intermission]

ありがとうございます！解決しました。自分も初心者でして汗。頑張りましょう！！

Answer 2

私も同じ現象になったので、
scrapyを再インストールしたら解決しました。
原因をしっかりと調べていませんがバージョンの問題かもしれないです。

python uninstall scrapy
python install scrapy