前提・実現したいこと
スクレイピングで商品タイトルに頻繁に使われているキーワードを分析したいと思っております。
発生している問題・エラーメッセージ
スクレイピングしたタイトルをまとめてリスト化してキーワードを分析したいのですが、このようにタイトル毎にリストが作られてしまいます。どのようにすれば、まとめてリスト化ができるのでしょうか?
[u'SHIMANO', u'NEXUS', u'Lezanova', u'Magnetic', u'Glove', u'3', u'Limited', u'Pro', u'GL-143P', u'RED', u'M/L/XL', u'Japan', u'NEW']
[u'SHIMANO', u'Globe', u'NEXUS', u'Lezanova', u'Print', u'Glove', u'3', u'Limited', u'Pro', u'GL-141Q', u'BLACK', u'M/L/XLJapan']
該当のソースコード
import
1import requests 2import collections 3from bs4 import BeautifulSoup 4 5 6def get_page(url): 7 response = requests.get(url) 8 if not response.ok: 9 print('Server reponded.ok:', response.status_code) 10 else: 11 soup = BeautifulSoup(response.text, 'html.parser') 12 return soup 13 14def get_title(soup): 15 titles = soup.find_all('a', class_='vip') 16 for e in titles: 17 data = (e.getText()) 18 word_list = data.split() 19 print(word_list) 20 21def main(): 22 url = 'https://www.ebay.com/sch/tokyootaku5/m.html?item=223348418775&rt=nc&_trksid=p2047675.l2562' 23 24 get_title(get_page(url)) 25 26if __name__ =='__main__': 27 main() 28
試したこと
リストのオブジェクトにreplaceで置き換えようと試みたが、エラー発生。
補足情報(FW/ツールのバージョンなど)
Python 3.7.3
あなたの回答
tips
プレビュー