動的に生成されたHTMLデータのスマホでの取得

Question

###前提・実現したいこと
私は今、mirrativ(mirrativ.com)と言う生放送配信サービスのコメントをandroid、iPhoneそれぞれ単体で読み上げるシステムを作ろうとしています。

###発生している問題・エラーメッセージ
動的に生成されたHTMLデータでコメントは管理されているのですがそのコメントを取得する方法で悩んでいます。

###試したこと
pcでc#とcasperjsを使い棒読みちゃんと連携させて作った時はスクレイピングを行いコメントを受け取ったら毎回コメントを棒読みちゃんに受け渡し再びスクレイピングを行うという方法をとっていたのですがこれだと以下のデメリットがありました。
・連続でコメントが来た時に（スクレイピングとスクレイピングの間）拾うことができない。
・視聴者数が水増しされてしまう。

ですのでできればスクレイピング以外の方法でお願いします。（もしないようでしたらスクレイピングでも構いません）

Answer 1

mirrativを知らなかったのでざっと調べてみましたが、ニコニコやyoutubeと違ってコメントを取得するためのAPIが公開されていません。動画ページを見たところ、コメントはWebSocketを使ってリアルタイム取得しているようです。このWebSocketを直接使えばコメントが取れるかもしれませんが、許可されているとは思えないのでバレたら訴えられるかもしれません。現状スクレイピングしか方法はないかと思います。まあ、そのスクレイピングもリロードされまくって負荷が上がるのでmirrativもいい顔をしないでしょう。

Comments

[yaira]

ご回答ありがとうございます。websocketを直接使う方法は思いつきませんでした。（一応正式ではないですがメールで作成の許可はいただいています。）

[masaya_ohashi]

そこまで許可が得られているのでしたら、WebSocketの接続方法を公式に確認したらいけるんではないでしょうか？頑張ってみてください。

[yaira]

ですね！ありがとうございます！