質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

Q&A

1回答

225閲覧

[python]HTMLのデータ処理(スクレイピングしたデータ)

Dadada_c.

総合スコア59

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

0グッド

0クリップ

投稿2018/07/17 23:41

編集2018/07/18 00:36

#やりたいこと
下記で取得してきたHTMLをCSVに出力したいのですが1セルの中におさまりません。
取得したspanで囲まれた部分を1つのセルに格納したいです。

エクセルで保存したcsvを開くと下記の様な状況になってしまいます。。
お手数おかけしますがご教示ください。

python

1coding: UTF-8 2import urllib.request, urllib.error 3import requests 4import csv 5import time 6 7from bs4 import BeautifulSoup 8 9with open('lists.txt') as f: 10 for line in f.readlines(): 11 target_url = 'https://xxxxxxxxxxxx' + line 12 print(target_url) 13 14 15 r = requests.get(target_url) 16 soup = BeautifulSoup(r.text, 'lxml') 17 img = soup.findAll('a' , class_='rakutenLimitedId_ImageMain1-3') 18 span = soup.find('span' , class_= 'item_name') 19 span2 = soup.find('span' , class_= 'item_desc') 20 select = soup.find('select' , class_= 'skuSelDrop') 21 22 23 for b in span: 24 #print(b) 25 26 with open('yeahhhh2.csv' , 'a') as f: 27 writer = csv.writer(f,lineterminator='\n') 28 writer.writerows([b]) 29 30 time.sleep(2) 31 32 for a in img: 33 #print(a.get('href')) 34 ccc = a.get('href') 35 36 with open('yeahhhh2.csv' , 'a') as f: 37 writer = csv.writer(f,lineterminator='\n') 38 writer.writerows([ccc]) 39 40 time.sleep(2) 41 42 43 for c in span2: 44 with open('yeahhhh2.csv' , 'a') as f: 45 writer = csv.writer(f,lineterminator='\n') 46 writer.writerows([c]) 47 48 49 for d in select: 50 with open('yeahhhh2.csv' , 'a') as f: 51 writer = csv.writer(f,lineterminator='\n') 52 writer.writerows([d]) 53 54

取得している予定のHTMLのspan要素

html

1<span class="item_desc"> 2<img src="https://xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx.gif" border="0"> 3<br><br><b>※同梱可能な数量は、ゆうパケットでは2個入ります<br><br></b> 4■全長:約30cm<br> 5■幅:約1cm<br> 6■素材:合成皮革<br> 7■入数:2本<br> 8※ホック式(角カン着脱可能)<br> 9※金具:シルバー<br> 10※角カン内寸20mm<br> 11<br>ビジネスバッグのハンドルの修理に。 12<br>バッグ制作にも欠かせないバッグハンドル。 13<br>仕上がりをぐんと完成度の高いものに変身させます。 14<br>※廃番・廃色などの理由により色の選択肢にない商品はお取扱いがございません。 15<br><font size="1">イナズマ 持手 持ち手 手口 取手 カバン用 かばん用 取り付け<br></font> 16<br><font color="#EEEEEE" size="1">cd910151</font></span> 17

#エクセルで開いたイメージ
イメージ説明

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

m.ts10806

2018/07/18 00:03 編集

spnan要素とは。 スペルミスは命取りになりかねませんのでご注意を・・・。
Dadada_c.

2018/07/18 00:04

ご回答ありがとうございます!spanで囲まれた部分の意味合いです。素人質問ですみません。よろしくお願いします。
m.ts10806

2018/07/18 00:05

回答ではなく指摘です(ここはそういうコメント欄です) 質問は編集できるとので調整願います。
Dadada_c.

2018/07/18 00:16

修正しました。ありがとうございました。
m.ts10806

2018/07/18 00:35

なおってませんが・・・ >spnan PCであればリアルタイムプレビューがでているはずなので、そちらを確認しながら調整してください。
Dadada_c.

2018/07/18 00:37

大変失礼しました。修正しました。ありがとうございました。
hayataka2049

2018/07/18 01:01 編集

ほぼ同じ内容の質問を立てるのはやめましょう。 https://teratail.com/questions/136433 前の質問からあまり変わっていないようですが、自分で工夫してやってみましたか?
Dadada_c.

2018/07/18 01:02

聞き方を変えた方がいいと思いまして再度立て直しました。前の質問は削除依頼中です。宜しくお願い致します。
m.ts10806

2018/07/18 01:05

あ、前の質問の回答 結構そのまま答えになってるっぽいですね。
guest

回答1

0

\nだけではただの改行指定になってしまうので
"aaa\nbbb"のように1セルにおさめたい情報をダブルクォートで括ってあげると良いです。

※Pythonは詳しくないのでコードは提示できません・・。

投稿2018/07/18 00:52

編集2018/07/18 00:55
m.ts10806

総合スコア80850

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

Dadada_c.

2018/07/18 00:55

ご回答ありがとうございます。スクレイピングしてきたspanをダブルクオートで囲むにはどうすればいいのでしょうか。。素人質問で申し訳ありませんがご教示頂けますと幸いです。。
m.ts10806

2018/07/18 01:04 編集

あとで追記したのですが、私がPython書けるわけではないので、ヒントだけの回答になっています。 今は1行ずつ書き込んでいるようなので、全体を文字列として取得してから書き込むようにするとか(ざっくりですみません)
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだベストアンサーが選ばれていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問