selenium webサイトの更新情報だけを取得したい

Question

webサイト内で必要な情報を一度スクレイピングし、
数日後に更新情報のみをスクレイピングしたいと考えています。

例えば、下記のような掲示板サイトの書き込み情報
http://kanto.hostlove.com/fuat/1

掲載情報が少なければ、再度同じプログラムを回して取得情報を丸ごと更新できますが、
情報量が多いと膨大な時間を要してしまうので非効率です。

方法論についてご教示いただけましたら幸甚です。
参考になるリソースでも構いませんので、何卒よろしくお願い申し上げます。

Answer 1

そのサイトは見てませんが、掲示板で、記事が追加されていき、過去分が修正されることはないということであれば、前回の最終取得時刻なり最終取得番号以降のものだけ取ればいいかと思います。

って、当たり前すぎるので、期待する回答ではないのかもしれません。その場合はどういうものが期待する内容か書いてください。

Comments

[john_doe_]

早速ご教示いただきましてありがとうございます。
やはり、ご指摘の通りのやり方になってしまいますね。
もう少し作業を進めて、より具体的な質問をさせていただきたく存じます。