スクレイピング

一時的にデータを取得したいケースと
自動で流し込みたいケースがあるかと思われますが、
スクレイピングしようと考える人間は、本質的にどちらが多いんでしょうか
一時的なデータであれば頑張ってコピペでいいと思いますが、
スクレイピングしようと思う人間は後者のケースが多いのでしょうか

回答5件

tt-lv100

総合スコア192

投稿2025/04/21 01:27

自分はスクレイピングしたことないですが、コピペで追いつかないからしているケースが多いと思うので、質問の二択だと

自動で流し込みたいケースがあるかと思われますが、
こちらな感じがしますね

otn

総合スコア86489

投稿2025/04/21 01:42

編集2025/04/21 01:49

そんなことを気にしてもしょうがないと思うのですが、質問意図はなんでしょうか？

そもそも、「全て手動でブラウザ画面からコピペ」もスクレイピングですが、おそらく「(RPA等も含めた)プログラムを書いてのスクレイピング」の事ですよね。
私は「この作業は絶対に一度きりだが、全手動コピペは面倒」と思うときは、ブラウザの開発者ツールでHTMLソースを取得してファイルに保存し、nokogiri aaa.htmlと対話型操作でスクレイピングすることもありますね(※1)。テーブルならExcelにコピペすることもあります。データ数個で面倒でなければ1つずつ手動コピペももちろんします。
（※1 一度きりならHTML取得のコードは書かないが、HTMLからデータを取得するコードは書くかもと言うこと。nokogiriはRubyで書かれたHTML(XML)構文解析パッケージ）

目的があって手段を選ぶので、目的を聞くなら「スクレイピングしたい時って、一度きりの作業で手動でも可能なケースと、毎日とか毎時とかの作業で手動では非現実的なケースと、どちらが多いでしょうか？」でしょうけど、それを聞いて何の意味があるのか分かりません。
あるいは手段を聞くなら「今回一度きり作業のスクレイピングと分かっていて、手動でも可能なんだけど、プログラムを書くことがありますか？」がですかね？これも何の意味があるのか分かりません。