Twitter API で世界の国別で使われている絵文字の件数を調べたい

Question

ツイッター上でどんな絵文字が使われているのか国別のランキングを調べてみたいと思いましたがTwitter APIを使うことで実現できますでしょうか。

ネットでそういったランキングや各国の比較があるのか検索しましたが一部のみで詳細のデータはなかったので、Twitter APIを使うことで自分でランキングを作成できるのではないかと思い質問させていただきました。

今年日本で最も使われている絵文字トップ10
今年アメリカで最も使われている絵文字トップ10

ようなランキングを作成したいです。

初心者の質問で申し訳ございませんが、よろしくお願い致します。

Answer 1

サードパーティ提供となりますが、NTT データが面白いサービスを出してます。
「Twitterデータ提供サービス」に最短1カ月から利用可能な新プラン追加
firehose API を利用したサービスなので、要件は満たせるかと。

twitter で普通に絵文字検索ができるようですね。
or 条件の設定方法が確認できませんでした(というか、クエリとしてうまく認識されなかった)が、最悪一つずつ検索することで『検索できる範囲での抽出』はできそうです。

Comments

[退会済みユーザー]

今見た感じだと「????」で秒間3-7ぐらいなんで単体検索なら現実的にカウントできそうです。

[suusui]

お調べいただきありがとうございます！

Twitterで普通に検索というのは、APIではなく普通に検索ということでしょうか。その場合、言語は詳細検索はできても位置情報はフィルターができないように見えましたが、国を特定したい場合は、はやりAPI等でデータを一度落として、そのデータから位置情報をわけるということが必要でしょうか。

無知で申し訳ございませんが、ある程度の主要国で特定期間、もっと使われた絵文字トップ１０みたいなのを作るためのデータ作成の最適な案がございましたらご教授いただけたら大変うれしいです。

[退会済みユーザー]

絵文字のコードを URL エンコードしたものを投げると結果が返ってくるようなので、多分 API でもサーチできるでしょうという趣旨の回答です。

参考：https://twitter.com/search?q=%F0%9F%98%80

> ある程度の主要国で特定期間、もっと使われた絵文字トップ１０みたいなのを作るためのデータ作成の最適な案がございましたらご教授いただけたら大変うれしいです。

いくつか思いつく方法がありますが、そこはご自身で考えた方が良いと思います。

[suusui]

早速ご返信いただきありがとうございます！大変参考になりました。色々調べながら挑戦してみたいと思います。

Answer 2

自分でランキングを作成できるのではないか

日本とアメリカにどれだけの数のユーザーがいて、どれだけの数のツイートが日々行われているのかを考えれば現実的に無理という結論になると思います。

それらのユーザーのツイート全てを解析するだけのリソースをどうやって用意するのか、という問題があるんで。（Twitter社自身がやろうと思えばできるでしょうけど）

Comments

[suusui]

回答ありがとうございます。実に無謀なことなんですね。。。勉強になりました。

[gentaro]

統計的に有意な数のサンプルを設定してその範囲で分析をする、とかならできるでしょうけど、質問文からはそういう意図は読み取れなかったんで、シンプルに無理だと思います。
どの程度の期間のツイートを対象とするのかもわかんないし、何十億ものツイートを分析するとなると、それだけの大量のデータをTwitterのサーバーからダウンロードしようと試みるだけで、サイバー攻撃と見なされるレベルになると思います。