スクレイピングで指定場所から画像をダウンロードしファイルとして保存するコードについて

Question

###前提・実現したいこと
ASINコードを実行するとAmazonサイトから商品名と価格、画像をそれぞれ1件ずつスクレイピングするコードをPythonで書いています。
下記ブログ記事の、Webスクレイピングを利用してWebサイトから画像データのダウンロードするコードとうまく組み合わせて実現しようとしています。

ブログ記事URL

###発生している問題・エラーメッセージ
ASINコードを実行するとAmazonサイトから商品名と価格、画像をそれぞれ1件ずつスクレイピングするコードで画像を商品名や価格と同じように取得すると長い文字列が返されてしまいました。

#!/usr/bin/env python                                                           
# -*- coding: utf-8 -*-                                                         
from email.MIMEMultipart import MIMEMultipart
from email.MIMEText import MIMEText
from email.Utils import COMMASPACE, formatdate
from selenium import webdriver
from selenium.common.exceptions import NoSuchElementException
from selenium.webdriver.common.keys import Keys
from sys import exit
from time import sleep
import argparse
import datetime
import requests
import os
import urllib2

DELAY_SLEEP = 1

def main():
    parser = argparse.ArgumentParser(description='Get product information from \
Amazon.co.jp')
    parser.add_argument('--asin', nargs='+')
    args = parser.parse_args()

    products = {}
    for a in args.asin:
        products[a] = {'url': "http://www.amazon.co.jp/dp/" + a}

    for k,v in products.iteritems():
        driver = webdriver.PhantomJS()
        try:

            # login first                                                       
            driver.get(v['url'])
            driver.set_window_size(1920, 1080)
            driver.implicitly_wait(DELAY_SLEEP)
            print "+ " + driver.current_url

              # Product name                                                      
            elem = driver.find_element_by_xpath('//*[@id="productTitle"]')
            v['name'] = elem.text.strip()

            # Product price                                                     
            elem = driver.find_element_by_xpath('//*[@id="priceblock_ourprice"]\
')
            v['price'] = elem.text.strip()

            # Product image                                                     
            elem = driver.find_element_by_xpath('//*[@id="landingImage"]')
            image_url = elem.get_attribute("src")
            useragent = 'sample'
            r = urllib2.Request(image_url, headers={'User-Agent': useragen\
t})
            f = urllib2.urlopen(r)
            v['image'] = f.read()

        except NoSuchElementException:
             print v['url'] + ": not available"
        except Exception as e:
            print e
            driver.close()
            exit(1)

    driver.close()

    for v in products.values():
        print v['name'], v['price'], v['image']

if __name__ == "__main__":
    main()

useragent = 'sample'の部分はそれぞれの環境で設定することになると思います。

###該当のソースコード
Webスクレイピングを利用してWebサイトから画像データのダウンロードするコード

#ライブラリの取り込み
import urllib.request
#URLと保存パスを指定
url = " http://su-gi-rx.com/wp-content/uploads/2017/07/Python.jpg"
savename = "test.png"
 
#ダウンロード
urllib.request.urlretrieve(url, savename)
print("保存しました")

###補足情報(言語/FW/ツール等のバージョンなど)
Python 2系を使用

Comments

[umyu]

質問内容は画像をダウンロードしファイルとして保存するでいいですかー？

[退会済みユーザー]

コメントいただきましてありがとうございます。発生している問題に記載しているコードでAmazonサイトから画像データのダウンロードしてファイルとして保存することを実現したいです。

Answer 1

提示のスクリプトでは、request.urlopenによって取得された画像のイメージがまるごとv['image']に格納されています。そのまま画面にprintしても意味のある結果にはなりません。
貴方が御覧になっている
http://su-gi-rx.com/2017/07/22/python_6/
"#ファイルへ保存"で示されている手順に従ってopenしてwriteすれば良いでしょう。

Comments

[退会済みユーザー]

ご回答いただきましてありがとうございました。