質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

0回答

1201閲覧

pythonでスクレイピングしたリストをまとめて、リストに格納する方法

akidada

総合スコア4

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

1グッド

0クリップ

投稿2020/03/14 09:18

編集2020/03/15 03:46

前提・実現したいこと

スクレイピングで商品タイトルに頻繁に使われているキーワードを分析したいと思っております。

発生している問題・エラーメッセージ

スクレイピングしたタイトルをまとめてリスト化してキーワードを分析したいのですが、このようにタイトル毎にリストが作られてしまいます。どのようにすれば、まとめてリスト化ができるのでしょうか?

[u'SHIMANO', u'NEXUS', u'Lezanova', u'Magnetic', u'Glove', u'3', u'Limited', u'Pro', u'GL-143P', u'RED', u'M/L/XL', u'Japan', u'NEW']
[u'SHIMANO', u'Globe', u'NEXUS', u'Lezanova', u'Print', u'Glove', u'3', u'Limited', u'Pro', u'GL-141Q', u'BLACK', u'M/L/XLJapan']

該当のソースコード

import

1import requests 2import collections 3from bs4 import BeautifulSoup 4 5 6def get_page(url): 7 response = requests.get(url) 8 if not response.ok: 9 print('Server reponded.ok:', response.status_code) 10 else: 11 soup = BeautifulSoup(response.text, 'html.parser') 12 return soup 13 14def get_title(soup): 15 titles = soup.find_all('a', class_='vip') 16 for e in titles: 17 data = (e.getText()) 18 word_list = data.split() 19 print(word_list) 20 21def main(): 22 url = 'https://www.ebay.com/sch/tokyootaku5/m.html?item=223348418775&rt=nc&_trksid=p2047675.l2562' 23 24 get_title(get_page(url)) 25 26if __name__ =='__main__': 27 main() 28

試したこと

リストのオブジェクトにreplaceで置き換えようと試みたが、エラー発生。

補足情報(FW/ツールのバージョンなど)

Python 3.7.3

s.k👍を押しています

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

can110

2020/03/14 09:28

提示されたURLに対してのスクレイピングは利用規約に違反しているようですが、問題ないでしょうか? https://www.ebay.com/help/policies/member-behavior-policies/user-agreement?id=4259 use any robot, spider, scraper, data mining tools, data gathering and extraction tools, or other automated means to access our Services for any purpose, except with the prior express permission of eBay;
meg_

2020/03/14 13:17

コードは「コードの挿入」で記入してください。
akidada

2020/03/15 03:47

can110 こちらは気付きませんでした、これからはAPIを使うように致します。ご指摘ありがとうございました。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだ回答がついていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問