質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
86.12%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

解決済

楽天市場のレビュー欄におけるスクレイピング。リストについて。

yasutin
yasutin

総合スコア24

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

1回答

0リアクション

0クリップ

268閲覧

投稿2022/08/30 11:25

前提

pythonで楽天市場レビュー欄のスクレイピングをしています。
score,age,sexは収集できたのですが、dateを収集することができません。
以下のコードで実行するとエラーとなってしまいます。

実現したいこと

・date(レビューの投稿された日付)を収集したい

発生している問題・エラーメッセージ

date = review.find_elements_by_css_selector("span.revUserEntryDate.dtreviewed").text AttributeError: 'list' object has no attribute 'text'

該当のソースコード

Python

#参考にしたwebサイト:https://onl.bz/umPGp1c (Seleniumを使ってスクレイピング – 商品レビュー編) import os import time import pandas as pd from selenium import webdriver import chromedriver_binary from selenium.webdriver.support.ui import WebDriverWait # #base # CURRENT_DIR = os.getcwd() ID = "202326_10000951"#店舗コード_商品ID URL = "https://review.rakuten.co.jp/item/1/" + ID + "/" #例:https://review.rakuten.co.jp/item/1/268158_10000003/1.1/(伊勢エビ) times = 20 columns = ["score","age","sex","date"] df = pd.DataFrame(columns=columns) # #selenium # options = webdriver.ChromeOptions() browser = webdriver.Chrome(options=options) for i in range(times): browser.get(URL + str(i+1) + ".1/") reviews = browser.find_elements_by_css_selector("div.revRvwUserSec") for review in reviews: age_and_sex = review.find_elements_by_css_selector("span.revUserFaceDtlTxt span")[0].text age = None sex = "" if age_and_sex != "": [age,sex] = age_and_sex.split(" ") age = int(age[:2]) score = review.find_element_by_css_selector("span.revUserRvwerNum.value").text date = review.find_elements_by_css_selector("span.revUserEntryDate.dtreviewed").text se = pd.Series([score,age,sex,date],columns)#Seriesでインデックスと一対一のデータを作る df = df.append(se, columns) time.sleep(1) df.to_csv("rakuten_review.csv",encoding="utf_8_sig") browser.quit()

試したこと

review.find_elements_by_css_selector("span.revUserEntryDate.dtreviewed").text
の部分を
review.find_elements_by_css_selector("span.revUserEntryDate.dtreviewed")[0].text
としてみましたが、インデックスの範囲外だというエラーが出ました。
str型ではだめでint型でなければならないのでしょうか?ですが、性別は「男性」、「女性」というように文字列としてcsvファイルに保存することができます。どうすれば日付をcsvファイルに保存できるでしょうか。

全くの初心者ですみません。よろしくお願いします。

以下のような質問にはリアクションをつけましょう

  • 質問内容が明確
  • 自分も答えを知りたい
  • 質問者以外のユーザにも役立つ

リアクションが多い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

下記のような質問は推奨されていません。

  • 間違っている
  • 質問になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

適切な質問に修正を依頼しましょう。

まだ回答がついていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
86.12%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。