質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
CSV

CSV(Comma-Separated Values)はコンマで区切られた明白なテキスト値のリストです。もしくは、そのフォーマットでひとつ以上のリストを含むファイルを指します。

ファイル

ファイルとは、文字列に基づいた名前又はパスからアクセスすることができる、任意の情報のブロック又は情報を格納するためのリソースです。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

Q&A

解決済

1回答

7681閲覧

Python:CSVへの追記で空行ができてしまう

DJR

総合スコア13

CSV

CSV(Comma-Separated Values)はコンマで区切られた明白なテキスト値のリストです。もしくは、そのフォーマットでひとつ以上のリストを含むファイルを指します。

ファイル

ファイルとは、文字列に基づいた名前又はパスからアクセスすることができる、任意の情報のブロック又は情報を格納するためのリソースです。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

0グッド

0クリップ

投稿2017/10/17 10:46

PythonでクローリングしたものをCSV化しています。
1ページに10件記載されているので、10件ずつテーブル内容をCSVファイルに追記していますが、
ページ遷移のたびに空行ができてしまいます。

イメージ説明

ファイルを開くときに、 newline = '' としていればOKとのWeb情報はありましたが、
謎は解けませんでした。

取得した内容に改行コードが含まれている可能性を検討しましたが、
strip()で削除されるはずなのでこれが原因ではないと思います。

環境は下記です。
・macOSXのDOCKER17.09.0-ce上のUbuntu14.04
・Python3.5.1

python

1import csv 2from selenium import webdriver 3from bs4 import BeautifulSoup 4 5当該のループ部分 6while len(browser.find_elements_by_class_name('next')) > 0: 7 csvFile = open("scr.csv", 'at', newline = '', encoding = 'utf-8') #ファイル開く 8 writer = csv.writer(csvFile)      #ライターつくる 9 browser.find_element_by_class_name('next').click() 10 soup = BeautifulSoup(browser.page_source, "html.parser") 11 table = soup.findAll("table")[0] 12 rows = table.findAll("tr") 13 14 try: 15 for row in rows: 16 csvRow = [] 17 for cell in row.findAll(['td']): 18 csvRow.append(cell.get_text().strip()) 19 writer.writerow(csvRow) #書き込み 20 finally: 21 csvFile.close()

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

tableに

<tr> <th>Month</th> <th>Savings</th> </tr>

のようにtd要素がないtr要素があるとか、

<tr> <td><br></td> <td><br></td> </tr>

のようなtr要素があれば当然そうなるだろうな、とソースを見て思いました。

HTML構造もない、CSVファイルの情報もない状態ではどっちなのかの推測もできません。


python

1 writer.writerow(csvRow) #書き込み

python

1 if csvRow: 2 writer.writerow(csvRow) #書き込み

にすればよさそうですね。

もしくは、空文字だけの行を作りたくないなら念を入れて

python

1 if any(csvRow): 2 writer.writerow(csvRow) #書き込み

にするでしょうか。

投稿2017/10/17 11:09

編集2017/10/17 11:51
quickquip

総合スコア11029

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

DJR

2017/10/17 11:30

ご回答ありがとうございます。 取得したいテーブルは下記の検索結果です。 https://www.japanese-cinema-db.jp/DetailSearches HTMLを見た所、quiquiさんが指摘されたような記述がありました! td要素がないtrが最初の行にありました。 これも拾ってきてしまうんですね・・・。
DJR

2017/10/19 01:25

いけました! 丁寧に解法まで記載いただき感謝します。 ありがとうございました!
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問