質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Django

DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

Beautiful Soup

Beautiful Soupは、Pythonのライブラリの一つ。スクレイピングに特化しています。HTMLデータの構文の解析を行うために、HTMLタグ/CSSのセレクタで抽出する部分を指定することが可能です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

1746閲覧

Djangoでスクリプトからデータベースに画像を保存したい

退会済みユーザー

退会済みユーザー

総合スコア0

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Django

DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

Beautiful Soup

Beautiful Soupは、Pythonのライブラリの一つ。スクレイピングに特化しています。HTMLデータの構文の解析を行うために、HTMLタグ/CSSのセレクタで抽出する部分を指定することが可能です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2021/01/14 13:37

前提・実現したいこと

Djangoを使って,スクレイピングしてきた画像をデータベースに保存したいのですが,
全然うまくいきません.
コードは django-extensions を使ってコマンドラインから image_getter.pyを実行しています.
何かアドバイスいただけると幸いです.

発生している問題・エラーメッセージ

rest_framework.exceptions.ValidationError: {'image': [ErrorDetail(string='添 付されたデータはファイルではありません。フォームのエンコーディングタイプを確 認してください。', code='invalid')]}

該当のソースコード

image_getter.py

python

1from app.serializers import * 2from app.models import * 3from project import settings 4 5from bs4 import BeautifulSoup as bs 6import requests 7import time, os 8 9def run(): 10 url = "https://www.gazouhoshii.com" 11 res = requests.get(url) 12 time.sleep(1) 13 14 soup = bs(res.text, "html.parser") 15 16 images = soup.select("img") 17 18 for image in images: 19 image_name = os.path.join(settings.MEDIA_ROOT, os.path.basename(image["src"])) 20 image_file = requests.get(i["src"]).content 21 time.sleep(1) 22 23 with open(image_name, "wb") as f: 24 f.write(image_file) 25 26 with open(image_name, "rb") as f: 27 image_serializer = ImageSerializer( 28 data= { 29 "image": f, 30 } 31 ) 32 33 image_serializer.is_valid(True)

app/models.py

python

1from django.db import models 2from django.db.models import * 3 4class Image(Model): 5 image = ImageField()

app/serializer.py

python

1from rest_framework import serializers 2 3from .models import Image 4 5class ImageSerializer(serializers.ModelSerializer): 6 class Meta: 7 model = Image 8 fields = ( 9 'id', 10 'image', 11 )

試したこと

data["image"] に image_name を渡す,image_file を直接渡すなどしてみましたが,
全て同じエラーが出ました.

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

これらの記事が参考になりますでしょうか。いかがでしょう。

pythonで画像をDBに登録し、DBから取得する

DjangoのImageField・DBによる画像保存について

投稿2021/01/15 12:41

_whitecat_22

総合スコア1305

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

退会済みユーザー

退会済みユーザー

2021/01/15 15:11 編集

ご回答ありがとうございます. DjangoのImageField・DBによる画像保存について https://hisafi.hatenablog.com/entry/2017/07/09/212430 を参考に, serializer を経由せずに modelで直接saveする方法で解決しました!
_whitecat_22

2021/01/15 15:16

解決して良かったです。 お役に立てて嬉しく思います。 こちらも勉強になりました。 ありがとうございます。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問