Twitter apiを用いて日時指定したツイートを取得したい

Question

前提

python初心者です。
Twitter apiを用いて、日時を指定したツイートデータを取得したいのですが、期間の指定方法が分かりません。

実現したいこと

• 指定した日時のツイートデータを取得したい。

該当のソースコード

import tweepy
from datetime import datetime,timezone
import pytz
import pandas as pd
import datetime

API_KEY = '＊'
API_SECRET = '＊'
ACCESS_TOKEN = '＊'
ACCESS_TOKEN_SECRET = '＊'

# APIの認証
auth = tweepy.OAuthHandler(API_KEY, API_SECRET)
auth.set_access_token(ACCESS_TOKEN, ACCESS_TOKEN_SECRET)

api = tweepy.API(auth)
dt_now = datetime.datetime.now()
#1時間前を取得したいので、hours=-1。もし1日前だったらdays=-1
dt_now = dt_now + datetime.timedelta(hours=-2)
dt_now2 = dt_now + datetime.timedelta(hours=-3)


now=dt_now.strftime('%Y-%m-%d_%H:%M:%S_JST')
before=dt_now2.strftime('%Y-%m-%d_%H:%M:%S_JST')

searchkey = 'アバター ウェイ・オブ・ウォーター OR アバター2 -filter:retweets'
item_num = 10

#15分おきに300しか取得できないので注意
tweets = tweepy.Cursor(api.search_tweets,q=searchkey,lang='ja',since_id=before,until=now).items(item_num)

def change_time_JST(time):
    utc = datetime.datetime(time.year, time.month,time.day, \
    time.hour,time.minute,time.second, tzinfo=timezone.utc)
    jst = utc.astimezone(pytz.timezone("Asia/Tokyo"))
    str_time = jst.strftime("%Y-%m-%d_%H:%M:%S")
    return str_time

tweet_data = []
for tweet in tweets:
    #ツイート時刻とユーザのアカウント作成時刻を日本時刻にする
    tweet_time = change_time_JST(tweet.created_at)
    create_account_time = change_time_JST(tweet.user.created_at)
    #tweet_dataの配列に取得したい情報を入れていく
    tweet_data.append([
        tweet.id,
        tweet_time,
        tweet.text,
        tweet.favorite_count, 
        tweet.retweet_count, 
        tweet.user.screen_name,
        tweet.user.name,
        tweet.user.description,
        tweet.user.friends_count,
        tweet.user.followers_count,
        create_account_time,
        tweet.in_reply_to_status_id_str,
        tweet.in_reply_to_user_id_str,
        tweet.coordinates,
        tweet.user.verified
                       ])
#取り出したデータをpandasのDataFrameに変換
#CSVファイルに出力するときの列の名前を定義
columns=[
    'ツイートID',
    'ツイートされた時間(日本時間)',
    'ツイートの内容',
    'いいねの数',
    'リツイートの数',
    'ツイートした人のID',
    'アカウント名',
    '自己紹介文',
    'フォロー数',
    'フォロワー数',
    'アカウント作成日時',
    'ツイートが返信の場合、返信先のツイートID',
    'ツイートが返信の場合、返信先のユーザーID',
    'ツイートされた場所',
    '認証アカウント(公式アカウント)かどうか'
    ]
#tweet_dataのリストをpandasのDataFrameに変換
df = pd.DataFrame(tweet_data,columns=columns)

#CSVファイルに出力する
#CSVファイルの名前を決める
file_name='tweetnumber.csv'
#CSVファイルを出力する
df.to_csv(file_name,encoding='utf-8-sig',index=False)

試したこと

上のコードで実行したのですが、日時指定がされず最新のツイートが取得されてしまいました。
うまく作動する方法はございますでしょうか。
よろしくお願いいたします。

Comments

[yuma.inaura]

前の質問が放置されてませんか？
https://teratail.com/questions/98r7b4vccpw99m

[AbeTakashi]

Twitterの無償版Search APIは過去10日しか遡れず、かつ検索漏れも発生するはずなので、それに引っかかってるだけではないでしょうか？ まともにデータを取得したいなら有償版APIを叩かないと厳しいと思いますが、その辺はどうなってますか？

Answer 1

https://docs.tweepy.org/en/stable/api.html#tweepy.API.search_tweets
は読みましたか?

until - Date should be formatted as YYYY-MM-DD.
since_id - Returns only statuses with an ID greater than (that is, more recent than) the specified ID.

untilはYYYY-MM-DDで、since_idはステータスIDを指定するものですよね?

---

日時からステータスIDの下限値を計算して、since_id と max_id に指定するのがいいでしょう。

max_id – Returns only statuses with an ID less than (that is, older than) or equal to the specified ID.

ステータスIDの仕様はこんな感じ
https://kyrt.in/2014/06/08/snowflake_c.html#id10
で、定数値などはC#のコードを参考にして

lower_limit_of_dt_now = (int(dt_now.timestamp()) * 1000 - 1288834974657) << 22

とか計算するとmax_idやsince_idに渡せる数値になります。