Pythonでpubsub的なことがやりたい

Question

あるサイトをスクレイピングしているのですが更新されたらデータを取得したくて色々探していたら、pubsubhubbubというものを見つけたのですが、これはPythonで使用することはできるのでしょうか？

crontabのように定期的にプログラムを実行して更新を確認する...というものではなく、更新されたら一瞬でデータを取得したいのです。

Twitterのuserstreamのような感じです。

Answer 1

pubsubhubbub について詳しくないですが、 publish側(更新通知)がわの参考実装みたいなのは、github上にありました。ただ多分Python2.7とかでしか動かなそうに見えたので、Python3で動かそうとするなら別途対応が必要になると思います。

https://github.com/pubsubhubbub/python-publisher

あるサイトのスクレイピングを一瞬で終わらせたいとのことですが、結局のところ、誰かが「そのサイトが更新された」ことを pubsubhubbubのサイトに通知(publish)しないといけないので、希望のことができるかどうかよくご検討した方が良いかと思います。

https://murashun.jp/blog/20150915-01.html