nokogiriでスクレイピングがしたい

Question

rubyを使ってスクレイピングがしたいのnokogiriというライブラリを使っています。
xpathを指定して

[#<Nokogiri::XML::Attr:0x111d108 name="href" value="/lpereira/lwan">]

このようなオブジェクトは取得できたのですが、ここからvalueにある文字列を取得する方法がわかりません。

require 'open-uri'




url = 'https://github.com/trending'

charset = nil
html = open(url) do |f|
  charset = f.charset 
  f.read 
end


doc = Nokogiri::HTML.parse(html, nil, charset)


doc.xpath('//li[@class="col-12 d-block width-full py-4 border-bottom"]').each do |node|
   p  node.xpath('//h3/a/@href')
end

こちらがコードになります。

スクレイピングしたいのは
https://github.com/trending
こちらのページです。

Answer 1

まず、XMLが間違っています。
node.xpath('//h3/a/@href')で、nodeの中のh3を探しているつもりでしょうが、これだとドキュメント全体からh3を探します。
nodeの中から探したいときは、node.xpath('.//h3/a/@href')です。

hrefのテキストが欲しいのであれば、

node.xpath('.//h3/a/@href')[0].text
node.xpath('.//h3/a')[0]['href']

Comments

[trrn2011]

回答ありがとうございます。
[0]は何を指定しているのですか？

[otn]

xpathメソッドは、合致した要素の配列を返すので、その先頭要素を取ります。

[trrn2011]

なるほど、配列で返してくるのですね！
ありがとうございます