ターミナルの実行状況をWebサイトに表示したい

Pythonのprintの出力結果をウェブサイトに表示したいです!
スクレイピングに30秒ほどかかっており、今どのサイトをスクレイピングしているのかWebサイト上で把握したいからです。
よろしくお願いします。

###調査したこと
HTTPのレスポンスは1つのリクエストに1レスポンスが基本でWebSocketのプロトコルを使う必要がある？と思いましたが、どのようにすれば良いか分かりません。

行動規範の内容に同意します

回答1件

ベストアンサー

そういうことをするためには動的サイトにする必要があります。ここで全てを説明するわけにはいかないので、ヒント程度で。

ページ側にjavascriptを仕込む。
サーバ側に問い合わせ(GETなど)を出して情報を取得。その情報でページの要素を書き換える。
サーバ側にAPIを作る
要求を受けたら情報(サイト名)を送るルートを作る。
スクレイピングのプロセス/スレッドを別にする
現状どうなっているかわかりませんが、サーバ側でそのままスクレイピングをしているとすると、スクレイピング中にサイトは動作できないので、別プロセス/スレッドに分離する必要があるでしょう。

javascriptを使って動的なサイトを作ることの入門書やサイトなど勉強するのがいいでしょう。

投稿2023/11/30 02:05