隠れたエンドポイントの見つけ方

Question

前提

pythonの
github.com/h4ckninja/twitter-video-downloader
このコードを読みました。

これはtwitter上の動画をダウンロードする為のコードです。
twitter-video-downloader.pyの16行目以下を見ると

https://twitter.com/i/videos/tweet/ツイートid

にGETするとweb playerにアクセスでき、そのソースコード内に動画のm3u8ファイルをダウンロードできるURLがあると書いてあるようです。

例https://twitter.com/i/videos/tweet/982292963492413442

確かに、ソースコードのdata-config属性内にHTMLエスケープされている動画URLを確認できます。
(HTMLアンエスケープしたJSON)

知りたいこと

twitterだけでなく、他のどんな動画視聴サービスも、通常の視聴URLとは別に動画をダウンロードするためのURLが設定されています。

例えばこのリポジトリの作者は、どうやってm3u8ファイルをダウンロードすることができるURLを調べたんでしょうか？

他のサービスの動画をダウンロードするコードを書きたいと思った時にどのようにして手順を見つければ良いのでしょうか。

Answer 1

ブラウザを開いた状態で「F12キー」を押してみましょう。新しい「なにか」が表示されるはずです。そこに表示される情報、そこで提供される機能、その他HTTPやHTML/Javascript/CSSに関する知識、等々を用いると調べることが出来ます。

Comments

[margarita]

一応デベロッパーツールで動画URLにアクセスした時のネットワークのlogやソースコードも見てみましたが、これといった収穫はありませんでした。
自分の知識不足のせいに他ならないですが、仰っていることの先がわかりません...。。

[YouheiSakurai]

ネットワークのログを見たのであれば、動画のリクエストは十中八九そこに記録されているはずです。

[margarita]

昨日見直したところ、m3u8ファイルへのリクエストは見つかりましたが
https://twitter.com/i/videos/tweet/
をほのめかすものはありませんでした。
ブレイクポイントを使って処理を追えば、毎回ランダムに変わるm3u8ファイルのURLを取得する方法が分かるかも知れませんが、それを知りたいわけじゃありません。