Q&A
以下のファイルをスクレイピングしようと思いrubyを使いコードを書いていたのですが、
なかなかうまいことできなくて、ここで質問することにしました。
require 'nokogiri' html =<<EOF <html> <div class="row"> <div class="title">タイトル１</div> <div class= "description">解説2</div> </div> <div class="row"> <div class="title">タイトル２</div> <div class="description">解説２</div> </div> <div class="row"> <div class="title">タイトル３</div> <div class="description">解説３</div> </div> </html> EOF doc = Nokogiri.parse(html)
このファイルに以下のようなコードを書きました。
require 'csv' require 'open-uri' title = [] description = [] header = ['title','description'] doc.css('.title').each do |file| title.push(file.text) end doc.css('.description').each do |desc| description.push(desc.text) end CSV.open('scrape.csv', 'w') do |csv| array = [title,description].transpose csv << header array.each do |arr| csv << arr end end
しかし、このコードはrowごとにcsvに入れているため、
項目が一つ亡くなった場合、解説とタイトルが１個ずれることになってしまいます。
rowごとにパースするにはどのようなコードを書けばいいでしょうか？
回答1件
0
ベストアンサー
xpathを利用します
ruby
1require 'nokogiri' 2 3html =<<EOF 4<html> 5<div class="row"> 6<div class="title">タイトル１</div> 7<div class= "description">解説2</div> 8</div> 9<div class="row"> 10<div class="title">タイトル２</div> 11<div class="description">解説２</div> 12</div> 13<div class="row"> 14<div class="title">タイトル３</div> 15<div class="description">解説３</div> 16</div> 17</html> 18EOF 19 20 21doc = Nokogiri::HTML.parse(html) 22 23doc.xpath('//div[@class="row"]').each do |row| 24 puts row.xpath('div').map { |e| '"' + e.text + '"' }.join(', ') 25end 26
csv
1"タイトル１", "解説2" 2"タイトル２", "解説２" 3"タイトル３", "解説３"
投稿2018/12/17 12:33
退会済みユーザー
総合スコア0
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。