YouTube Data APIを使ってチャンネル情報を取得し、CSVファイルに書き出したい。

Question

前提・実現したいこと

YouTube Data APIを使って、あるキーワードを含むチャンネルの情報を取得しようとしています。

発生している問題・エラーメッセージ

情報を格納する配列からデータを取り出して、csvに書き込みたいのですが、空のデータになってしまいます。

エラーメッセージ

### 該当のソースコード
from apiclient.discovery import build
from apiclient.errors import HttpError
from oauth2client.tools import argparser
import pandas as pd
DEVELOPER_KEY = "キーのパスをコピペしました"
YOUTUBE_API_SERVICE_NAME = "youtube"
YOUTUBE_API_VERSION = "v3"
pip install --upgrade google-api-python-client
def youtube_search(pagetoken):
  youtube = build(YOUTUBE_API_SERVICE_NAME, YOUTUBE_API_VERSION,
    developerKey=DEVELOPER_KEY)
  search_response = youtube.search().list(
    part='id,snippet',
    q='観光協会',
    type='channel',
    maxResults=50,
    pageToken=pagetoken
).execute()
  channels = []
  for search_result in search_response.get("items", []):
    if search_result["id"]["kind"] == "youtube#channel":
        channels.append([search_result["snippet"]["title"],search_result["snippet"]["description"],search_result["snippet"]["publishedAt"],
                                    search_result["id"]["channelId"]])
  try:
        nextPagetoken =  search_response["nextPageToken"] 
        youtube_search(nextPagetoken)
  except:
        return
  channel_report = pd.DataFrame(data=channels, columns=['title', 'description', 'publishedAt', 'channelId'], index=False)
  channel_report.to_csv('/content/drive/MyDrive/research/channels_report.csv')
  channel_report.to_csv('/content/drive/MyDrive/research/channels_report.csv', mode='a')
```ここに言語名を入力
python
ソースコード

試したこと

printを使って、channel_reportに中身があるか確認しましたが、実行しても何も返ってきませんでした。

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Answer 1

必要なパッケージをインストールした後、以下のコードを実行したところうまくいきました。

def youtube_search(pagetoken, channels):
  if pagetoken == 0:
    print('a')
    youtube = build(YOUTUBE_API_SERVICE_NAME, YOUTUBE_API_VERSION, developerKey=DEVELOPER_KEY)
    search_response = youtube.search().list(
        part='id,snippet',
        q='観光協会',
        type='channel',
        maxResults=50
    ).execute()
  else:
      youtube = build(YOUTUBE_API_SERVICE_NAME, YOUTUBE_API_VERSION, developerKey=DEVELOPER_KEY)
      search_response = youtube.search().list(
          part='id,snippet',
          q='観光協会',
          type='channel',
          maxResults=50,
          pageToken=pagetoken
      ).execute()

  for search_result in search_response.get("items", []):
    if search_result["id"]["kind"] == "youtube#channel":
        channels.append([search_result["snippet"]["title"],search_result["snippet"]["description"],search_result["snippet"]["publishedAt"],
                                    search_result["id"]["channelId"]])
        print(search_result["snippet"]["title"],search_result["snippet"]["description"],search_result["snippet"]["publishedAt"],search_result["id"]["channelId"])

  try:
    nextPagetoken =  search_response["nextPageToken"] 
    youtube_search(nextPagetoken, channels)
  except:
    return

channel = []
youtube_search(0, channel)
channel_report = pd.DataFrame(data=channel, columns=['title', 'description', 'publishedAt', 'channelId'], index=None)
channel_report.to_csv('/content/drive/MyDrive/research/channels_report.csv')

Answer 2

ソースコードは実際に動かしたものでしょうか？

pip install --upgrade google-api-python-client

というのがコード文中にあるのでまずそこで　syntax errorか何かが出るのではないかという予想です

あと、
youtube_search()を呼び出してないようですがどうでしょうか

Comments

[manafi]

早速のご返信、ありがとうございます。
ソースコードは、google colaboratoryを使って実際に動かしたものです。
pip install --upgrade google-api-python-clientは、実行できました。(以下その部分の実行結果です。）
---
Requirement already satisfied: google-api-python-client in /usr/local/lib/python3.7/dist-packages (2.22.0)
Requirement already satisfied: httplib2<1dev,>=0.15.0 in /usr/local/lib/python3.7/dist-packages (from google-api-python-client) (0.17.4)
Requirement already satisfied: uritemplate<4dev,>=3.0.0 in /usr/local/lib/python3.7/dist-packages (from google-api-python-client) (3.0.1)
Requirement already satisfied: google-api-core<3.0.0dev,>=1.21.0 in /usr/local/lib/python3.7/dist-packages (from google-api-python-client) (1.26.3)
Requirement already satisfied: google-auth<3.0.0dev,>=1.16.0 in /usr/local/lib/python3.7/dist-packages (from google-api-python-client) (1.35.0)
Requirement already satisfied: google-auth-httplib2>=0.1.0 in /usr/local/lib/python3.7/dist-packages (from google-api-python-client) (0.1.0)
Requirement already satisfied: protobuf>=3.12.0 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (3.17.3)
Requirement already satisfied: requests<3.0.0dev,>=2.18.0 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (2.23.0)
Requirement already satisfied: googleapis-common-protos<2.0dev,>=1.6.0 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (1.53.0)
Requirement already satisfied: pytz in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (2018.9)
Requirement already satisfied: six>=1.13.0 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (1.15.0)
Requirement already satisfied: packaging>=14.3 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (21.0)
Requirement already satisfied: setuptools>=40.3.0 in /usr/local/lib/python3.7/dist-packages (from google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (57.4.0)
Requirement already satisfied: rsa<5,>=3.1.4 in /usr/local/lib/python3.7/dist-packages (from google-auth<3.0.0dev,>=1.16.0->google-api-python-client) (4.7.2)
Requirement already satisfied: cachetools<5.0,>=2.0.0 in /usr/local/lib/python3.7/dist-packages (from google-auth<3.0.0dev,>=1.16.0->google-api-python-client) (4.2.2)
Requirement already satisfied: pyasn1-modules>=0.2.1 in /usr/local/lib/python3.7/dist-packages (from google-auth<3.0.0dev,>=1.16.0->google-api-python-client) (0.2.8)
Requirement already satisfied: pyparsing>=2.0.2 in /usr/local/lib/python3.7/dist-packages (from packaging>=14.3->google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (2.4.7)
Requirement already satisfied: pyasn1<0.5.0,>=0.4.6 in /usr/local/lib/python3.7/dist-packages (from pyasn1-modules>=0.2.1->google-auth<3.0.0dev,>=1.16.0->google-api-python-client) (0.4.8)
Requirement already satisfied: idna<3,>=2.5 in /usr/local/lib/python3.7/dist-packages (from requests<3.0.0dev,>=2.18.0->google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (2.10)
Requirement already satisfied: certifi>=2017.4.17 in /usr/local/lib/python3.7/dist-packages (from requests<3.0.0dev,>=2.18.0->google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (2021.5.30)
Requirement already satisfied: chardet<4,>=3.0.2 in /usr/local/lib/python3.7/dist-packages (from requests<3.0.0dev,>=2.18.0->google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (3.0.4)
Requirement already satisfied: urllib3!=1.25.0,!=1.25.1,<1.26,>=1.21.1 in /usr/local/lib/python3.7/dist-packages (from requests<3.0.0dev,>=2.18.0->google-api-core<3.0.0dev,>=1.21.0->google-api-python-client) (1.24.3)
[38]
0 秒
---

youtube_search()についてですが、以下の部分で呼び出していると認識していたのですが、これは誤解でしょうか？
---
search_response = youtube.search().list(
part='id,snippet',
q='観光協会',
type='channel',
maxResults=50,
pageToken=pagetoken
).execute()

ご指摘いただいた点についての解釈で誤解がありましたら申し訳ございません。
引き続きよろしくお願いいたします。

[退会済みユーザー]

def youtube_search(pagetoken):

と定義したこの関数自体の呼び出しですね

def myfunc():
print('hello')

と定義した関数は

myfunc()

と呼び出さないと実行されませんが、同様に
youtube_search()
を呼び出していたかどうかという感じです。

[manafi]

関数の呼び出しについて例を用いながら分かりやすくご説明いただきありがとうございます！
最後にyoutube_search()を加えて実行したところ、エラーもなく実行できました。
ただ、やはりscvファイルの中身は空のままです。
そのほかに考えられる原因がありましたら、ご教授いただけないでしょうか？

[退会済みユーザー]

一点気になるのは

おそらくですが、to_csvが２行並んでるところは
１行目の処理は上書きで書き込み、２行目の処理は追記で書き込みで
結果２倍のデータが書き込まれないでしょうか

この関数が再起的に自分自身を呼び続ける構造なので　mode='a'　のある２行目の方だけでいいのではないかということと

あとは、どの段階でデータがないのかをprintでもいいので出して見てみる等でしょうか

例えば
channel_report = pd.DataFrame(data=channels, 〜
の上に
print(len(channels))
を出してみてCSVに吐き出す直前にその変数に値が入ってきているのか

[manafi]

ご返信ありがとうございました。アドバイスいただいた通りprintを要所要所に差し込んでみたところ、そもそもデータが取得できていなかったので、インデントの変更等、様々なことを試して解決しました。
ありがとうございました！！