pythonのスクレイピングで新着コメントを逐次取得したいのですがどうするのが手っ取り早いでしょうか？

Question

やりたいこと
・5秒毎にコメントが自動更新されるサイトの新着コメントをを取得して保存していきたい

やろうと思っていること
・コメント一覧を取得→5秒前のコメント一覧と比較→被っていないものを保存

なにか，もっと効率のいいやり方や，便利なライブラリなどあるのでしょうか？
pythonは始めたばかりなので，教えていただけると幸いです

Answer 1

コメントは必ず時刻順に並んでいる、かつ時刻順なので必ず末尾に追加される、という仕様なら読み込み済みのインデックス(件数)を保持しておいて次はそこ以降だけ読み込むというのもアリかと思います。

Answer 2

そのサイトに、RSSがあったり、コメントに時刻が付いたりしていない限り、地道にやるしか無いです。