Djangoを使ってSeleniumでスクレイピングしたデータをローカルホストにアップしたいがエラー表示される。

前提・実現したいこと

こんにちわ。python初学者です。

試しにDjangoを使ってスクレイピングしたデータをローカルホスト(127.0.0.1:8000/coll/)で読み込み表示させたいのですが、$python manage.py runserverをしてサイト（/coll)にアクセスすると下記のようなエラーが出てしまいます。

このスクレイピングコードの関数自体はDjango抜きでなら結果が返ってくるので、index.htmlとの連携？がうまくいっていないように感じます。こちらの関数のカスタマイズはどのようにしたら良いでしょうか？？
下記のエラーコードは何の改善を求めていて、またどのようにしたら結果を表示さすことができるでしょうか？
ぜひ、ご教授願いたいです。よろしくお願いします。

発生している問題・エラーメッセージ

Traceback (most recent call last):
  File "/Users/uu/.local/share/virtualenvs/un-jT0daukl/lib/python3.8/site-packages/django/core/handlers/exception.py", line 47, in inner
    response = get_response(request)
  File "/Users/uu/.local/share/virtualenvs/un-jT0daukl/lib/python3.8/site-packages/django/utils/deprecation.py", line 116, in __call__
    response = self.process_response(request, response)
  File "/Users/uu/.local/share/virtualenvs/un-jT0daukl/lib/python3.8/site-packages/django/middleware/clickjacking.py", line 26, in process_response
    if response.get('X-Frame-Options') is not None:
AttributeError: 'str' object has no attribute 'get'
[19/Aug/2020 16:25:37] "GET /coll/ HTTP/1.1" 500 56825
Internal Server Error: /coll/

該当のソースコード

coll/views.py

from django.shortcuts import render
from selenium import webdriver
import chromedriver_binary
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.chrome.options import Options
import time
import urllib.request

options = Options()
options.headless = True
options.add_argument('--headless')


driver = webdriver.Chrome(options=options)
driver.get("動的なwebサイト")
def get_date(requests):
    selector = '要素'
    element = driver.find_elements_by_css_selector(selector)
    for a in element:

        return a.get_attribute("href")
    context = {'links': a}

    return render(requests, 'coll/index.html', context)

該当のソースコード

templates/coll/index.html

<!DOCTYPE html>
<head>
    <meta charset="UTF-8">
    <title>index</title>
</head>
<body>
<h1>Hello Django</h1>
<p>{{ links }}</p>
</body>

試したこと

掲載しているcoll/views.pyのコードを丸々変えてindex.htmlでローカルホスト(127.0.0.1:8000/coll/)に『Hello Django！！』とテキスト自体は表示さすことができたのでadmin.pyやsetting.pyの設定は問題はないと思っているのですが、、、もし追記で必要ならすぐにこちらに掲載させていただきたいです。

補足情報（FW/ツールのバージョンなど）

mac10.15.3
python3.8

行動規範の内容に同意します

回答1件

ベストアンサー

Python
1element = driver.find_elements_by_css_selector(selector)
2for a in element:
3    return a.get_attribute("href")
4```ここで、`return`してるからではないでしょうか？
5この部分では、何をしたいのですか？
6***
7#### 追記
8```Python
9# views.py
10def get_date(requests):
11    selector = '要素'
12    element = driver.find_elements_by_css_selector(selector)
13    element = [a.get_attribute("href") for a in element] # 追加
14    context = {'links': element}
15    return render(requests, 'coll/index.html', context)

HTML
1<!-- coll/index.html -->
2{% for link in links %}
3  {{link}}
4{% endfor %}
5```で表示できます。

投稿2020/08/19 10:22

編集2020/08/19 21:49

ForestSeo

総合スコア2722

sakanaku

2020/08/19 10:38

ご回答ありがとうございます。 a.get_attributeでwebサイトのhrefの中にあるurlをとって来たいのですが、、コードミスでしょうか？？関数に入れてない時は、 for a in element: b = a.get_attribute("href"） print（b）で出力できたのですが、returnの場合どのようにコードを書いたら関数を出力した時にhrefの中のリンクを取るような結果が上手く表示されるでしょうか？？すいません、ぜひよろしくお願いします。

ForestSeo

2020/08/19 11:02 編集

一回 return したらその場でその関数は終了します。 return render(・・・) は実行されません。

ForestSeo

2020/08/19 11:02 編集

回答を編集しました。そちらをご覧ください

sakanaku

2020/08/19 14:53

すいません。丁寧にサンプルコードまで記載していただきありがとうございます。たった今、コードを記載したら無事にDjangoでスクレイピングデータをとってこれました。ありがとうございます。ただ、a.get_attribute("href"）を消したことによりhrefの中のURLだけを取得することができなくなってしまいました。 a.get_attribute("href"）を残したままのコードの書き方で何か良い方法はあるでしょうか？？対象となるWebページのサンプルですがこんな感じです。 <a class="クラス名" target="_blank" href="取得したいURLの部分""></a> すいません、何度も申し訳ございません。

ForestSeo

2020/08/19 22:16 編集

リスト内包表記でできると思います。追記しました。

sakanaku

2020/08/20 08:30

お疲れ様です。 element = driver.find_elements_by_css_selector(selector) element = [a.get_attribute("href") for a in element] こんな感じで変数を２回？（表現方法があっているか分かりませんが、、）書く方法を初めて知りました！！上手いことスクレイピング結果を表示することができました。感動しました。すいません。ご教授ありがとうございました。

行動規範の内容に同意します