Ruby＋Nokogiriを使って、地元の天気を取得できるようにする

Question

###前提・実現したいこと
Ruby＋Nokogiriを使って、地元の天気を取得できるようにしたいと考えています。
その時に、取得地域名、取得時間、天気、今の温度、湿度、気圧、風、日の出、日の入りの一覧を出力できるようにしたいです。

###発生している問題・エラーメッセージ
取得地域名までは取得できるようにしたのですが、それ以降の時間等がうまく取得できない。

###該当のソースコード
test.rb
require 'open-uri'
require 'nokogiri'

url = 'http://weathernews.jp/onebox/35.6516/139.70546/temp=c&q=%E6%9D%B1%E4%BA%AC%E9%83%BD%E6%B8%8B%E8%B0%B7%E5%8C%BA&v=ZGQoP49lwEPkvgJylJznZlXc26Is+uFxvu/Mw/3uMeI'

charset =nil
html = open(url) do |f|
charset = f.charset
f.read
end
doc = Nokogiri::HTML.parse(html, nil, charset)
doc.xpath('//*[@id="content_main"]/div[3]').each do |node|
p node.xpath('h3').text

☆の部分の取得方法がわかっていない。

end

###試したこと
スクレイピングシステムを理解したい。

###補足情報(言語/FW/ツール等のバージョンなど)
CentOS 6.8
ruby 2.4.0p0
nokogiri: 1.7.0.1

Answer 1

すこし汎用的に使えるようにしてみました。
(位置を緯度経度で指定する、 情報を hash で得る)

w.rb

require 'nokogiri'
require 'open-uri'

def weather(longitude, latitude)
  url = "http://weathernews.jp/onebox/#{longitude}/#{latitude}"
  html = open(url, &:read)
  doc = Nokogiri::HTML.parse(html)

  {
    location: doc.css('.title_now').text,
    weather: doc.css('.sub')[0].text.split(','),
    info: doc.css('.table-obs_sub').css('tr').map do |tr|
            [
              tr.css('.obs_sub_title').text,
              tr.css('.obs_sub_value').text[1..-1]
            ]
          end.to_h
  }
end

p weather(35.6516, 139.70546)

実行

$ ruby w.rb 
{:location=>"東京都渋谷区代官山町付近", :weather=>["18:30", " 快晴"], :info=>{"湿度"=>"44 %", "気圧"=>"1004 hPa", "風"=>"北北東 2 m/s", "日の出"=>"06:49", "日の入"=>"16:51"}}

追記：
天気のサイトの画面には表示されていませんが、 html 中には紫外線の情報もふくまれています。
紫外線情報もとるように変更を加えると良いかもしれません。

Comments

[退会済みユーザー]

勉強になります。

Answer 2

コンテンツの転用違反だと思いますよ。
スクレイピングするより前に、利用条件を確認することが重要です。
ご利用に際して

Answer 3

require"open-uri"
require"certified"

url = "http://weathernews.jp/onebox/35.6516/139.70546/temp=c&q=%E6%9D%B1%E4%BA%AC%E9%83%BD%E6%B8%8B%E8%B0%B7%E5%8C%BA&v=ZGQoP49lwEPkvgJylJznZlXc26Is+uFxvu/Mw/3uMeI"
page_source = open(url, &:read)

area = page_source.scan(%r|<h3 class="title_now">(.+?)</h3>|)

time_weather = page_source.scan(%r|<span class="sub">(.+?)</span>|).flatten!

name = ["湿度", "気圧", "風","日の出", "日の入り"]
info = page_source.scan(%r|<td class="obs_sub_value">：(.+?)</td>|).flatten!

puts time_weather
puts area
puts "----------------------------"
puts name.map!{|e| e + "\s:\s" + info[name.index(e)]}

nokogiriの使い方は分かりませんが、書いてあることをするプログラムを
考えてみました。
追記

require"open-uri"
require"certified"
require"nokogiri"

url = "http://weathernews.jp/onebox/35.6516/139.70546/temp=c&q=%E6%9D%B1%E4%BA%AC%E9%83%BD%E6%B8%8B%E8%B0%B7%E5%8C%BA&v=ZGQoP49lwEPkvgJylJznZlXc26Is+uFxvu/Mw/3uMeI"

page = Nokogiri::HTML(open(url))

puts page.css(".sub").text
puts page.css(".title_now").text
puts "----------------------------"
name = page.css(".obs_sub_title").to_a.map{|e| e.text}
info = page.css(".obs_sub_value").to_a.map{|e| e.text}
puts name.map!{|e| e + info[name.index(e)]}

付け焼刃なので間違っている可能性があります。
.cssでclass？の情報をとることができるようです。
参考
Nokogiriでスクレイピング