前提・実現したいこと
「Rubyによるクローラー開発技法」を参考にanemoneを使って簡単なクローラーを作っています。
ターミナル上でデータの取得は出来ましたがRailsを使って取得したデータをviewに表示させる方法が分かりません。
よろしくお願い致します。
発生している問題・エラーメッセージ
ターミナル上で下記の内容のファイルを$ruby ファイル名
で実行するとデータは取得出来ます。
これをどのようにRailsのMVCモデルに乗せて表示するか分かりません。
該当のソースコード
ruby
1require 'anemone' 2require 'nokogiri' 3require 'kconv' 4 5urls = [] 6urls.push("https://www.amazon.co.jp/gp/bestsellers/digital-text/2291657051") 7urls.push("https://www.amazon.co.jp/gp/bestsellers/digital-text/2291905051") 8urls.push("https://www.amazon.co.jp/gp/bestsellers/books/466298") 9urls.push("https://www.amazon.co.jp/gp/bestsellers/books/466282") 10 11Anemone.crawl(urls, :depth_limit => 0) do |anemone| 12 anemone.on_every_page do |page| 13 14 doc = Nokogiri::HTML.parse(page.body.toutf8) 15 16 category = doc.xpath( 17 "//*[@id='zg_browseRoot']/ul/li/a").text 18 19 sub_category = doc.xpath( 20 "//*[@id='zg-right-col']/h1/span").text 21 22 puts category + "/" + sub_category 23 24 25 items = doc.xpath("//ol[@id='zg-ordered-list']/li") 26 items.each{|item| 27 #ランキング 28 puts item.xpath("span/div/div/span/span").text 29 #商品名 30 puts item.xpath("span/div/span/a/div").text 31 #著者 32 puts item.xpath("span/div/span/div[1]").text 33 } 34 end 35end
試したこと
上記の内容を少し変えてコントローラーのアクションに記載したところundefined method 'anemone'
とエラーメッセージが表示されました。(@itemsをviewの方で繰り返し処理をしようとした。)
ruby
1def show 2 urls = [] 3 urls.push("https://www.amazon.co.jp/gp/bestsellers/digital-text/2291657051") 4 urls.push("https://www.amazon.co.jp/gp/bestsellers/digital-text/2291905051") 5 urls.push("https://www.amazon.co.jp/gp/bestsellers/books/466298") 6 urls.push("https://www.amazon.co.jp/gp/bestsellers/books/466282") 7 8 Anemone.crawl(urls, :depth_limit => 0) do |anemone| 9 anemone.on_every_page do |page| 10 11 doc = Nokogiri::HTML.parse(page.body.toutf8) 12 13 category = doc.xpath( 14 "//*[@id='zg_browseRoot']/ul/li/a").text 15 16 sub_category = doc.xpath( 17 "//*[@id='zg-right-col']/h1/span").text 18 19 puts category + "/" + sub_category 20 21 @items = doc.xpath("//ol[@id='zg-ordered-list']/li") 22 23 end 24 end 25 end
補足情報(FW/ツールのバージョンなど)
ここにより詳細な情報を記載してください。
あなたの回答
tips
プレビュー