質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
Twitter

Twitterは、140文字以内の「ツイート」と呼ばれる短文を投稿できるサービスです。Twitter上のほぼ全ての機能に対応するAPIが存在し、その関連サービスが多く公開されています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

1988閲覧

TwitterAPIを使用して、特定の日本語を含むツイートのストリーミングを行いたい

tksx1227

総合スコア6

Twitter

Twitterは、140文字以内の「ツイート」と呼ばれる短文を投稿できるサービスです。Twitter上のほぼ全ての機能に対応するAPIが存在し、その関連サービスが多く公開されています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2021/06/15 08:54

編集2021/06/17 00:09

前提・実現したいこと

Pythonにおいて、TwitterAPI、Tweepyを使用して、特定ワードが含まれるツイートをリアルタイムでストリーミングしようとしています。

該当のソースコード

Python

1import config # APIのKEYなどを記述してる 2import tweepy 3 4 5class MyStreamListener(tweepy.StreamListener): 6 def on_status(self, status): 7 j = status._json 8 # RT, mention, replyを除く 9 if ("retweeted_status" not in j.keys()) and (j["in_reply_to_status_id"] is None) and (j["entities"]["user_mentions"] == []): 10 print("-" * 50) 11 print(j['text']) 12 13 def on_error(self, status_code): 14 if status_code == 420: 15 # returning False in on_error disconnects the stream 16 return False 17 18 def on_timeout(self): 19 print('Timeout...') 20 return True 21 22 23# Twitterのユーザー名からユーザーIDを取得する 24def get_user_id(api, user_name): 25 if user_name[0] == "@": 26 user_name = user_name[1:] 27 user_info = api.get_user(user_name) 28 return user_info.id_str 29 30 31CK = config.API_KEY 32CS = config.API_SECRET_KEY 33AT = config.ACCESS_TOKEN 34ATS = config.ACCESS_TOKEN_SECRET 35 36auth = tweepy.OAuthHandler(CK, CS) 37auth.set_access_token(AT, ATS) 38api = tweepy.API(auth) 39 40listener = MyStreamListener() 41myStream = tweepy.Stream(auth=api.auth, listener=listener) 42follow = [] 43track = ["プログラミング", "Google"] # 特定ワードのリスト 44myStream.filter(follow=follow, track=track, is_async=True) 45

試したこと等

機能としては、上記のコードで正しく動作しているのですが、指定するワードが英語のときと日本語のときで感度が全く異なります。

具体的には、英語を指定した場合は、高頻度でツイートが表示されるのですが、日本語を指定した場合は、ほとんどのツイートを拾ってくれません。
単純に絶対量の差はあると思うのですが、直接Twitterで検索をかけて最新ツイートを監視していても、やはり日本語を指定した場合は、反映されないツイートが多く存在します。

これは、Tweepyの仕様なのでしょうか。
有識者の方の見解を伺いたいです。

追記(2021/06/17)
Node.jsでも試してみましたが、やはり日本語を指定した場合、ツイートの拾い残しが結構多かったです。
詳しくはわからないのですが、TwitterAPIの仕様ということになるんですかね。

補足情報(FW/ツールのバージョンなど)

Python: 3.8.5
tweepy: 3.10.0

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

詳しくはわからないのですが、TwitterAPIの仕様ということになるんですかね。

おそらくはそういうことだと思います。

日本語は「わかち書き」をしない言語なので、英語などのわかち書きが前提の言語に合わせたワード検索仕様だったりすると、日本語のワード検索の精度が下がったりするのかもしれません。あくまで想像ですが。

追記)
https://www.ipsj.or.jp/dp/contents/publication/41/S1101-R1802.html

有料APIを使えば何とかなるかもしれません。ツイート全体を短時間で収集して、そこからワードレベルでツイートを絞り出すみたいなことをやっている人はいるようです。要件に合うかどうかは分かりませんが参考までに。

投稿2021/06/17 01:32

編集2021/06/17 05:46
AbeTakashi

総合スコア4853

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

tksx1227

2021/06/17 04:34

なるほど、一理ありますね。 残念ですが、諦めるしかなさそうです、、
tksx1227

2021/06/18 13:39

追記の方、拝見させていただきました。 確かに、無料・有料で変化がありそうですね。 もう少し自分で色々いじってみてダメそうなら諦めます。 質問はしばらく寝かせておきたいと思います。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問