サイト上で変化するテキストを取得するにはどうすればいい？

Question

テキストがランダムに変化するサイトがあります。
変化した瞬間にリアルタイムで取得するにはどうすればいいのでしょうか？

webスクレイピングは試してみたけどムリでした。

一応こんなロジックを考えています

var beforeText = 太郎
var changeCount = 0

//テキスト範囲が変化するまでループ
for changeCount < 1 {

  //選択範囲のテキストを取得してafterTextに代入
  var afterText = 次郎

  //テキストが変化したらアクションを実行
  if beforeText != afterText {
    func 太郎じゃない()
    changeCount += 1
  }

}

Answer 1

変化した瞬間にリアルタイムで取得する

HTTPでPULL型の通信をする以上はポーリングしないと無理ですし、ポーリングは基本的に相手のサイトに負荷をかけてしまいます。
Atomフィードなどがサイトの更新通知を受け取る方法として提供されていれば、そちらを利用するようにしましょう。

もしサイトの更新通知をWebhookなどで受け取れるサービスであれば、通知に基づきアクションをすることは可能でしょう。

webスクレイピングは試してみたけどムリでした。

無理、という部分はWebスクレイピングに何を期待して、具体的に何を失敗したんでしょうか？

Comments

[clo.momo]

webスクレイピングは、変化したテキストを取得しようとしたけど、エラーがでて取得できませんでした。

Frames are not supported at the moment. Please open the frame in a new tab or window and try scraping again

プログラミングを学びはじめたばかりで知識不足なのですが、変化したかチェックするたびにアクセスするのではなくて、単純に現在表示されているweb上からコピペする感じで取得は無理ですか？

プログラムがサイトにアクセスするのは最初の１回だけで、サイトの値が更新されたら即座に取得、といったように。

javascriptでは次のようなやり方でできるみたいなのですが、これもやはり通信しているのでしょうか？

const getSelectArea = () => {
const val = $('textarea').val(),
elm = $('text').get(0),
tmp = {
before: val.slice(0, elm.selectionStart),
after: val.slice(elm.selectionEnd),
text: elm.value.slice(elm.selectionStart, elm.selectionEnd),
};
return tmp;
};

console.log(getSelectArea().text); // 選択範囲を表示

[mather]

「Frames are not supported at the moment.」
「フレームに対応していない」と書いてあります。これは<frame>タグのことです。フレームは一つのページの中に別のページを追加で呼び出す方法ですので、一つのページを呼び出す際に実はページアクセスが複数回発生しています。

「プログラムがサイトにアクセスするのは最初の１回だけで、サイトの値が更新されたら即座に取得、といったように。」
HTTPでデータ取得するというアクションを起こさないと勝手にデータは降ってきません。まずはHTTPの仕組みを調べてみてはいかがでしょうか？

JavaScriptに関しては、そもそもブラウザ上で動くものですし、ページの動きそのものをコントロールできる言語なので「リスナー」などの仕組みでページの動作に反応しています。
もし「テキストがランダムに変化する」のがJavaScriptの動きによるものなら、HTMLやJSのリソースをを取得した後にSwiftでJavaScriptを実行する必要がありますが、これは現状不可能だと思います。

もし可能なら、対象のサイトを直接提示したほうが適切な回答が得られると思います。

[clo.momo]

不可能ですか。ありがとうございました。
おかげで、できないことにこれ以上時間を費やさずに済みます。
HTTPについても調べてみますね。