トップ Google Colaboratoryに関する質問ｓPythonからJSONファイルで画像付きツイートを自動化する方法

編集履歴

回答編集履歴

修正

2020/11/19 05:38

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -248,7 +248,7 @@
 yesかnoかでいえばnoです。
-convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパス（img_url）が渡されます。
+convert_url(url)の引数urlには、tweetcontent.json内に記載されている、googleドライブ上のファイルへのパス（img_url）が渡されます。
@@ -260,11 +260,11 @@
-convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパスを渡すべきです。
+convert_url(url)の引数urlには、tweetcontent.jsonに記載されている、googleドライブ上のファイルへのパスを渡すべきです。
-なお、回答のコードは「JSONに記載されたgoogleドライブへのパス」をconvert_url関数に渡すようにしています。
+回答のコードは「tweetcontent.jsonに記載されたgoogleドライブ上のファイルへのパス」をconvert_url関数に渡すようにしています。

修正

2020/11/19 05:38

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -260,11 +260,11 @@
-convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパス「JSONに記載したファイルパス」を渡すべきです。
+convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパスを渡すべきです。
-なお、回答のコードは、元質問のコードをなるべく変えないように「JSONに記載されたgoogleドライブへのパス」をconvert_url関数に渡すようにしています。
+なお、回答のコードは「JSONに記載されたgoogleドライブへのパス」をconvert_url関数に渡すようにしています。

修正

2020/11/19 05:32

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -260,9 +260,11 @@
-引数には、JSONに記載したgoogleドライブへのパス（url）が渡されていればよいので、元質問のコードから変える必要はありません。
+convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパス「JSONに記載したファイルパス」を渡すべきです。
+なお、回答のコードは、元質問のコードをなるべく変えないように「JSONに記載されたgoogleドライブへのパス」をconvert_url関数に渡すようにしています。

修正

2020/11/19 03:57

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -418,7 +418,7 @@
 def add(a,b):
-  print("main関数を呼び出しました")
+  print("add関数を呼び出しました")
   return a + b
@@ -452,7 +452,7 @@
 def add(a,b):
-  print("main関数を呼び出しました")
+  print("add関数を呼び出しました")
   return a + b
@@ -470,8 +470,8 @@
 if __name__ == '__main__':
-   print('実行：__name__==__main__')
+   print('実行： IF __name__ = =__main__:')
-```
+```

修正

2020/11/19 03:54

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -248,7 +248,7 @@
 yesかnoかでいえばnoです。
-convert_url(url)の引数urlは、JSONに記載したgoogleドライブへのパス（url）が渡されます。
+convert_url(url)の引数urlには、JSONに記載されている、googleドライブ上のファイルへのパス（img_url）が渡されます。

修正

2020/11/19 03:52

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -276,13 +276,17 @@
 コメントを追加しました。
-回答コード全文には最初から、upload_media関数内に、convert_url(url)を呼び出すコードを入れておりましたが、
+回答コード全文には最初から、upload_media関数内にconvert_url(url)を呼び出すコードを入れておりましたが、
 「# <----追加」というコメントを入れ忘れておりました。
+main()からconvert_url(url)を呼ぶのではなく、
-upload_media関数内に、convert_url(url)を呼び出していますので、main()で呼ぶ必要はありません。
+upload_media関数の中からconvert_url(url)を呼び出しています。
@@ -296,7 +300,7 @@
 回答コードは、自分のテスト環境用のjsonファイルパスを記載してしまっていたので、元質問のファイルパスに修正しました。
-元質問のコードのように、jsonファイルのパスを直指定で問題ありません。
+元質問のコードのように、jsonファイルのパスを直指定するやり方で問題ありません。
@@ -310,7 +314,7 @@
-importを無視しての話になりますが、pythonでは上から順番に読み取られ、実行できる部分があれば上から実行されます。
+（importを無視しての話になりますが）pythonでは上から順番に読み取られ、実行できる部分があれば上から実行されます。
 ただし、関数定義部分（def）やクラス定義部分（class）等は、読み取られるだけで実行されません。

追加

2020/11/19 03:50

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -222,7 +222,7 @@
 def main():
-    json_file_path = 'contents.json'
+    json_file_path = '/content/sample_data/tweetcontent.json'        # ファイルパスを修正しました。
     tweet_content = get_tweet_content(json_file_path)
@@ -237,3 +237,237 @@
     main()
 ```
+> ・convert_url(url)の引数urlはreturnされた「"https://drive.google.com/uc?export=view&id=%s" % a.group(1)」の値が記載されている認識でよろしいでしょうか。
+yesかnoかでいえばnoです。
+convert_url(url)の引数urlは、JSONに記載したgoogleドライブへのパス（url）が渡されます。
+> 認識が間違っている場合、引数にはどの値(ファイルパス指定、JSONに記載したファイルパスの変数を指定など)を定義するべきでしょうか。
+引数には、JSONに記載したgoogleドライブへのパス（url）が渡されていればよいので、元質問のコードから変える必要はありません。
+> ・main()関数にはconvert_url(url)を呼び出す関数がないようですが、こちらの関数はどのように呼び出せばよろしいでしょうか。
+コメントを追加しました。
+回答コード全文には最初から、upload_media関数内に、convert_url(url)を呼び出すコードを入れておりましたが、
+「# <----追加」というコメントを入れ忘れておりました。
+upload_media関数内に、convert_url(url)を呼び出していますので、main()で呼ぶ必要はありません。
+> ・main()関数に記載したjson_file_pathにjsonファイルのパスを直指定しているのですが、こちらはjsonファイル名を記載するのが正しいのでしょうか。
+回答コードは、自分のテスト環境用のjsonファイルパスを記載してしまっていたので、元質問のファイルパスに修正しました。
+元質問のコードのように、jsonファイルのパスを直指定で問題ありません。
+> ・Pythonの実行方法として、定義された関数をmainから実行していくという認識であっているのでしょうか。※初歩的な質問で申し訳ございません
+特にmainから実行していくという制約はありません。
+importを無視しての話になりますが、pythonでは上から順番に読み取られ、実行できる部分があれば上から実行されます。
+ただし、関数定義部分（def）やクラス定義部分（class）等は、読み取られるだけで実行されません。
+（※importを読み取ったときの挙動等、細かい点まで考慮すると上記の説明は完全に正確というわけではありませんが、雰囲気としてそういうものだと考えてくだされば結構です）
+例：
+[1]
+```
+def sub(a,b):
+  print("sub関数を呼び出しました")
+  return a - b
+def main(a,b):
+  print("main関数を呼び出しました")
+  return a + b
+# 関数等定義以外で一番最初に現れる行なので、ここから実行される。
+if __name__ == '__main__':
+   # main()が最初でなくてよい
+   print(sub(1,2))
+   print(main(1,2))
+```
+[2]
+```
+def sub(a,b):
+  print("sub関数を呼び出しました")
+  return a - b
+def main(a,b):
+  print("main関数を呼び出しました")
+  return a + b
+# if __name__ == '__main__':がなくても
+# 関数定義以外で一番最初に現れる行なので、ここから実行される。
+print(sub(1,2))
+print(main(1,2))
+```
+[3]
+```
+def sub(a,b):
+  print("sub関数を呼び出しました")
+  return a - b
+# mainという名前の関数は存在する必要はない
+def add(a,b):
+  print("main関数を呼び出しました")
+  return a + b
+if __name__ == '__main__':
+   print(sub(1,2))
+   print(add(1,2))
+```
+[4]
+```
+def sub(a,b):
+  print("sub関数を呼び出しました")
+  return a - b
+def add(a,b):
+  print("main関数を呼び出しました")
+  return a + b
+# 関数定義以外で一番最初に現れる行なので、ここから実行される。
+print(sub(1,2))
+print(add(1,2))
+# ここより下は上の2行が実行された後評価され、実行される。
+if __name__ == '__main__':
+   print('実行：__name__==__main__')
+```

追加

2020/11/19 03:47

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -70,7 +70,7 @@
 import json
-import random
+import random    # <-------回答追加時当初から追加しています
 import re      # <-------追加
@@ -170,9 +170,9 @@
 def upload_media(img_url): #===========================
-  # urlを変換する
+  # urlを変換する                        # <-------回答追加時当初から追加しています
-  img_url = convert_url(img_url)                         # <-------追加
+  img_url = convert_url(img_url)        # <-------回答追加時当初から追加しています
   #urlをオープンする

コメントを追加

2020/11/19 03:08

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -172,7 +172,7 @@
   # urlを変換する
-  img_url = convert_url(img_url)
+  img_url = convert_url(img_url)                         # <-------追加
   #urlをオープンする

追記

2020/11/19 03:06

投稿

sfdust

スコア1137

test CHANGED Viewed

@@ -3,3 +3,237 @@
 import random
 とすればよいのではないでしょうか。
+------------
+追記
+まず、上記のコードで正常に動かないところを修正します。
+具体的には、
+```
+def upload__media(img_url):
+```
+　を
+```
+def upload_media(img_url):
+```
+に変えます。（uploadとdataの間のアンダーバーを２つから１つに変える。）
+その上で、/content/sample_data/tweetcontent.json の中の "img_url":の「対象ファイルのURL」を、
+ネット上の自由に使用可能な素材へのリンクに変えてテストしたところ、
+自分の環境では正常に画像ツイートできました。
+ためしに「対象ファイルのURL」を自分のGoogle Drive上の画像ファイルへのリンクに変えたところ、
+質問者さんと同じ
+Image upload failed: %s {"request":"/1.1/media/upload.json","error":"media type unrecognized."}
+というエラーが出ました。
+したがって、Google Driveの「リンクの取得」で取得したリンクそのままでは、twitter APIからは画像データを正常に取得できないと推測されます。
+そこで下のコードでは、[stackoverrun](https://stackoverflow.com/questions/10311092/displaying-files-e-g-images-stored-in-google-drive-on-a-website) の内容を参考に、urlを取得できる形に変換する関数（convert_url）を追加しています。
+全文
+```
+import json
+import random
+import re      # <-------追加
+from requests_oauthlib import OAuth1Session
+#urlを使用するためのモジュール
+import urllib.request
+# url変換に使用する正規表現
+pattern = re.compile(r".*/file/./(.*)/.*")      # <-------追加
+#下記TwitterのAPIキー、アクセスキーのため記載しておりません
+CONSUMER_KEY = '****************************'
+CONSUMER_SECRET = '****************************'
+ACCESS_TOKEN = '****************************'
+ACCESS_TOKEN_SECRET = '****************************'
+#Twitterアクセスキーを変数へ格納
+twitter = OAuth1Session(CONSUMER_KEY,CONSUMER_SECRET,ACCESS_TOKEN,ACCESS_TOKEN_SECRET)
+#メディアアップロードに使用するURL
+url_media = "https://upload.twitter.com/1.1/media/upload.json"
+#テキストアップロードに使用するURL
+url_text = "https://api.twitter.com/1.1/statuses/update.json"
+# Googleドライブ上のリンクを、twitter API等で直接取得できるurlに変換する関数   <-------追加
+def convert_url(url):
+    a = re.search(pattern, url)
+    try:
+        return  "https://drive.google.com/uc?export=view&id=%s" % a.group(1)
+    except (AttributeError, IndexError) as e:
+        # パターンマッチしない場合はメッセージを出して、渡されたurlをそのまま返す。
+        print("[%s]はパターンにマッチしないため、そのまま返します。" % url)
+        return url
+#jsonファイルからツイート本文と画像urlを取得
+def get_tweet_content(json_file_path):
+  #テキストファイルを読み込む
+  file = open(json_file_path, 'r', encoding='utf-8')
+  #開いたファイルをjson.load関数でJSONとして読み込む
+  json_data = json.load(file)
+  #JSONとして読み込んだfile変数が格納されたjson_data変数に、jsonデータを格納
+  #random.choice()でリストからランダムに要素を一つ取得
+  return random.choice(json_data["contents"])
+#画像をTwitterにアップロードし、media_idをリターン
+#img_urlはJSONで指定した画像オブジェクト
+def upload_media(img_url): #===========================
+  # urlを変換する
+  img_url = convert_url(img_url)
+  #urlをオープンする
+  res = urllib.request.urlopen(img_url) #=========================
+  img_data = res.read()
+  img_files = {'media': img_data}
+  res_media = twitter.post(url_media, files=img_files)
+  if res_media.status_code == 200:
+      return json.loads(res_media.text)['media_id']
+  else:
+      print('Image upload failed: %s', res_media.text)
+      exit()
+#ツイート本文とアップロード済みの画像のmedia_idを引数にツイート
+def post_tweet(tweet_text, media_id):
+    params = {'status': tweet_text, 'media_ids': media_id}
+    res = twitter.post(url_text, params=params)
+    if res.status_code == 200:
+        print('Auto Tweet Succeeded.')
+    else:
+        print('Failed. : %d' % res.status_code)
+def main():
+    json_file_path = 'contents.json'
+    tweet_content = get_tweet_content(json_file_path)
+    media_id = upload_media(tweet_content['img_url'])
+    post_tweet(tweet_content['tweet_text'], media_id)
+if __name__ == '__main__':
+    main()
+```