Ruby on Railsで複数サイトからスクレイピングしたアグリゲーションサイトをつくるためのオススメ方法

Question

複数サイトから、タイトルが画像、説明などをスクレイピングし、ひとつのサイトに表示させたいです。
定期的にまわして、常に最新の情報を取得しておきたいのですが、Ruby初心者なのでどうやって実現すればいいかわかりません。

調べてみたところいくつか手段がありそうですが、結局一番ベストな方法はなんなのでしょうか？

Answer 1

スクレイピング自体は別に目新しい技術ではないので、調べてみて出来そうな方法でまずは作ってしまうのがベストだと思いますよ。

技術的な部分よりは、

• サイトとして公開する場合は著作権的にセーフな場合の方が少ない
• サイト側がスクレイピングを禁止/拒否するようなケースがある

といった法的な部分の方がネックになりやすいので、
実際にスクレイピングしたり公開するタイミングで専門家に聞くなりして判断する必要があります。