質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.46%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

Q&A

解決済

2回答

4657閲覧

tiktokのweb上に表示されていない情報をスクレイピングしたい

Yuiti628

総合スコア71

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

0グッド

0クリップ

投稿2020/05/21 17:48

前提・実現したいこと

スクレイピング初心者です。

tiktokに興味があり、スクレイピングの勉強しながら分析したいと思います。

https://www.tiktok.com/trending?lang=ja
このようにトレンドを見ることができる場所がありますが、再生回数はありません。
アプリを見ると再生回数の表示があります。

このような情報はどのように取得するのでしょうか?

その他、ジャンル分けで分析などもしたいので、隠れている属性などはどのように調べるのでしょうか?

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

miyabi_takatsuk

2020/05/21 17:57

スクレイピングより確実に情報取得できる方法があるかと思いますが、 あくまでスクレイピングでやりたいということでしょうか? (スクレイピングの勉強とのことで)
Yuiti628

2020/05/21 18:14

そのような方法があるのですか? 別の方法があるならそちらを教えて頂きたいです。 それしかないと思ってスクレイピングと言っていました。
miyabi_takatsuk

2020/05/21 18:18

tiktokはAPIが提供されているので、 そちらのほうが、合法ですし、確実に、表に出ていない情報も取得できるかと。 https://rapidapi.com/blog/lp/tiktok-api/?utm_source=google&utm_medium=cpc&utm_campaign=Alpha_103823381987&utm_term=tiktok%20api_e&utm_content=&gclid=Cj0KCQjwzZj2BRDVARIsABs3l9JC-UfXKUFQjFtqnq72MWRwfQ5m3s4bPl0iJUr3GbhibO-W34fsuOoaAkrmEALw_wcB ただ、公式かわからない・・・。 上記怪しいかもなので、 他にも、tiktok api などの検索で探してみるといいかと。
m.ts10806

2020/05/21 19:31

>web上に表示されていない情報 は「スクレイピング」と言えるのでしょうか。 Web上に表示されている情報を取得するのが「スクレイピング」と思うのですけど。
Yuiti628

2020/05/22 03:44

apiはみたのですが、再生回数やジャンルなどのデータは取得ができないみたいです。 表示されていないデータを取得することはなんというのでしょうか?
guest

回答2

0

ベストアンサー

Web上に表示されていない情報をスクレイピングできませんね。

投稿2020/05/22 02:51

退会済みユーザー

退会済みユーザー

総合スコア0

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

Yuiti628

2020/05/22 03:42

そうなんですね ありがとうございます
guest

0

スクレイピングとは、画面に表示された情報を取り出す行為です。
例外的に、画面に表示されていないだけでクライアント側に情報が配信されている場合は情報を取り出すことができますが、基本的には表示されていない情報をスクレイピングで取り出すことはできません。

ウェブ版とアプリでは取得している情報が異なるということになるかと思います。

APIを利用することで取得できる場合がありますが、残念ながらtiktokでは再生回数を取得するようなAPIは提供されていないようです。
https://developers.tiktok.com/doc

投稿2020/05/22 02:11

akagire

総合スコア13

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

Yuiti628

2020/05/22 03:41

ありがとうございます 動画のidとget関数のようなもので再生回数が取得できると考えています。 このような操作はスクレイピングではなく、なんと言うのが正しいのでしょうか?
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.46%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問