Q&A
windows 10
python 3.7.3
pythonのパッケージ iCrawlerでの画像収集を行うために、コマンドプロンプトで以下のコードを実行したところ、
該当のソースコード
rom icrawler.builtin import GoogleImageCrawler crawler = GoogleImageCrawler(storage={"root_dir": "images"}) crawler.crawl(keyword="青信号", max_num=100)
以下のエラーメッセージが表示され、imageフォルダが作成されませんでした。
発生している問題・エラーメッセージ
2020-03-05 17:21:47,016 - INFO - icrawler.crawler - start crawling... 2020-03-05 17:21:47,017 - INFO - icrawler.crawler - starting 1 feeder threads... 2020-03-05 17:21:47,018 - INFO - feeder - thread feeder-001 exit 2020-03-05 17:21:47,019 - INFO - icrawler.crawler - starting 1 parser threads... 2020-03-05 17:21:47,020 - INFO - icrawler.crawler - starting 1 downloader threads... 2020-03-05 17:21:49,478 - INFO - parser - parsing result page https://www.google.com/search?q=%E9%9D%92%E4%BF%A1%E5%8F%B7&ijn=0&start=0&tbs=&tbm=isch 2020-03-05 17:21:51,526 - INFO - parser - no more page urls for thread parser-001 to parse 2020-03-05 17:21:51,526 - INFO - parser - thread parser-001 exit 2020-03-05 17:21:52,020 - INFO - downloader - downloader-001 is waiting for new download tasks 2020-03-05 17:21:57,020 - INFO - downloader - no more download task for thread downloader-001 2020-03-05 17:21:57,020 - INFO - downloader - thread downloader-001 exit 2020-03-05 17:21:57,025 - INFO - icrawler.crawler - Crawling task done!
icrawlerのparserに問題があると思われるのですが、具体的な解決策を教えていただきたいです。
補足情報（FW/ツールのバージョンなど）
ここにより詳細な情報を記載してください。
回答1件
0
ベストアンサー
現在、googleの仕様が変わりicrawlerは使えなくなっています。
代わりに、beingCrawlerを使用します
python
1from icrawler.builtin import BingImageCrawler 2crawler = BingImageCrawler(storage={'root_dir': 'dog'}) 3crawler.crawl(keyword="犬", max_num=10)
投稿2020/04/06 04:40
総合スコア134
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。