Python3 Selenium スクレイピング Gmail API メール本文の参照方法

Question

前提・実現したいこと

Anacondaをインストールし、
spyderでwindows上にPython環境を作り、Seleniumで
スクレイピングのソースコードがあります。
※プログラムに関しては全くの初心者です。
スクレイピングでGmail APIを利用していて、
10秒毎にGmailアカウントを閲覧し、メールの件名に、
60秒以内に指定した文字列のメール受信があった場合は、
プログラムを起動させるものです。

今回はメールの件名「FW: AAAAAAAA」に加え、さらにメールの本文に「ABCD」という
特定の文字が含まれている場合と、
メール件名は見ずに、メール本文のみ参照しにいくように修正したいです。

有識者の方、ご教授いただければと存じます。

該当のソースコード

import time
from datetime import datetime
from datetime import date
from httplib2 import Http
from googleapiclient import sample_tools
from apiclient import discovery
from apiclient.discovery import build
from oauth2client import client
from oauth2client import tools
from oauth2client import file
from oauth2client.file import Storage
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support.ui import Select
import dateutil.parser as parser

SCOPES = 'https://www.googleapis.com/auth/gmail.readonly'
store = file.Storage('C:\Users\masa\Documents\credentials-gmail.json')
creds = store.get()
if not creds or creds.invalid:
    flow = client.flow_from_clientsecrets('client_secret.json', SCOPES)
    creds = tools.run_flow(flow, store)
service = build('gmail', 'v1', http=creds.authorize(Http()))
def fetch_inbox():
    output=[]
    results = service.users().messages().list(userId='me', labelIds='INBOX', maxResults=10).execute()
    for msg in results['messages']:
        topid = msg['id']
        msg = service.users().messages().get(userId='me', id=topid).execute()
        payld = msg['payload']
        headr = payld['headers']
        for k in headr:
            if k['name']=='Date':
                temp_date=(parser.parse(k['value'])).strftime("%Y-%m-%d %H:%M:%S")
        for j in headr:
            if j['name']=='From':
                temp_from=j['value']
        for i in headr:
            if i['name']=='Subject':
                temp_subject=i['value']
        output.append((temp_date, temp_from, temp_subject, msg['snippet']))
#        print(msg['snippet'])
    return(output)

judge=False
while judge==False:
    info=fetch_inbox()
    for i in range(len(info)):
        dt1=datetime.today()
        dt2=datetime.strptime(info[i][0],"%Y/%m/%d %H:%M:%S")
        delta=dt1-dt2
        if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60:
            print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"指定のメールを受信しました")
            judge=True
    if judge==False:
        print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"waiting...")
        time.sleep(10)

if judge==True:
    print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"これよりプログラムを起動します")

試したこと

if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60:

恐らくここの部分を修正するのだと思うのですが、どのように修正すればいいのかが、
わかりません。ご教授いただければと存じます。

Answer 1

output.appendでpayld['body']を加えて、if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60:にand '探したい文字' in info[i][加えたbodyのインデクス]を足す。

Comments

[masa0924]

ご回答ありがとうございます。
```
output.append((temp_date, temp_from, temp_subject, msg['snippet'], payld['body']))
```
↑この部分はこうですかね(^^;

```
if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60:
```
この部分は実際にどのような配列になるのでしょうか(-_-;)...

[papinianus]

配列ですか？ifの条件なので配列ではないと思いますが？
outputをそのようになさったなら、ifの行で、
`and '探したい文字' in info[i][4]`を末尾に足せばよいと思いますが。

[masa0924]

if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60 and '探したい文字' in info[i][4]:

こういう事でしょうか？

[masa0924]

if info[i][2]=='FW: AAAAAAAA' and delta.total_seconds()<60 and '探したい文字' in info[i][4]:

このようにして、実行してみたのですが、うまく起動しません。

[papinianus]

うまく起動しない、というのは全く送信されなくなったのか探したい文字の有無にかかわらず依然として送信するのかエラーなのか、どういう状況でしょうか？
そのifの前の行でprint(info[i][4])や、print( '探したい文字' in info[i][4])とすると本文や探すべき文字の判断が行われているか検証できると思います

[masa0924]

ご連絡遅くなり申し訳ありません。
エラーは出ないのですが、実際に探したい文字を含めて実験しましたが、
何も反応がなく、プログラムは動いている状態です。

質問が少し変わってしまいますが、件名は全く見にいかずに、
本文だけを参照しにいくようにする場合だと、どのようにすればよいのでしょうか？
本文の完全一致ではなくて、「BBB」という文字が含まれている場合で
フィルターできますでしょうか？

```
if info[i][4]=='BBB' and delta.total_seconds()<60:
```
このようにしてみましたが、うまくいきません。

[papinianus]

「何も反応がなく、プログラムは動いている状態」とは、andを追加したのに、探したい文字がなくても実行されるということでしょうか？奇妙ですね。
そのパターンだと`if 'BBB' in info[i][4] and delta.total_seconds()<60:`でしょう。==だと本文が'BBB'そのものでないと動作しません。

[masa0924]

ありがとうございます。なるほど==だと完全一致になるのですね。
ちょっと
if 'BBB' in info[i][4] and delta.total_seconds()<60:
これで試してみます！！

[masa0924]

output.append((temp_date, temp_from, temp_subject, msg['snippet'], payld['body']))
ここの部分は、payld['body']はこの位置へ追加でも問題ありませんでしょうか？

[masa0924]

output.append((temp_date, temp_from, temp_subject, msg['snippet'], payld['body']))

if 'BBB' in info[i][4] and delta.total_seconds()<60:

これで実行してみたのですが、エラーなどは出ませんが、
BBBを含むメールを送信してみてもシステムが反応しません。

[masa0924]

import time
from datetime import datetime
from datetime import date
from httplib2 import Http
from googleapiclient import sample_tools
from apiclient import discovery
from apiclient.discovery import build
from oauth2client import client
from oauth2client import tools
from oauth2client import file
from oauth2client.file import Storage
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support.ui import Select
import dateutil.parser as parser

SCOPES = 'https://www.googleapis.com/auth/gmail.readonly'
store = file.Storage('C:\Users\masa\Documents\credentials-gmail.json')
creds = store.get()
if not creds or creds.invalid:
flow = client.flow_from_clientsecrets('client_secret.json', SCOPES)
creds = tools.run_flow(flow, store)
service = build('gmail', 'v1', http=creds.authorize(Http()))
def fetch_inbox():
output=[]
results = service.users().messages().list(userId='me', labelIds='INBOX', maxResults=10).execute()
for msg in results['messages']:
topid = msg['id']
msg = service.users().messages().get(userId='me', id=topid).execute()
payld = msg['payload']
headr = payld['headers']
for k in headr:
if k['name']=='Date':
temp_date=(parser.parse(k['value'])).strftime("%Y/%m/%d %H:%M:%S")
for j in headr:
if j['name']=='From':
temp_from=j['value']
for i in headr:
if i['name']=='Subject':
temp_subject=i['value']
output.append((temp_date, temp_from, temp_subject, msg['snippet'], payld['body']))
# print(msg['snippet'])
return(output)

print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"システムを起動しました")
judge=False
while judge==False:
info=fetch_inbox()
for i in range(len(info)):
dt1=datetime.today()
dt2=datetime.strptime(info[i][0],"%Y/%m/%d %H:%M:%S")
delta=dt1-dt2
if 'JP225Cash M15' in info[i][4] and delta.total_seconds()<60:
print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"ただ今、指定した文字列が本文に含まれているメールを受信しました")
judge=True
if judge==False:
print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"waiting...Exit")
time.sleep(10)

if judge==True:
print(datetime.today().strftime("%Y/%m/%d %H:%M:%S"),"これよりシステムの処理を開始します")

[masa0924]

どこか、おかしな箇所があれば、ご指摘いただきますと幸いです。。。

[papinianus]

はい。特に個数の制約はないです(以前に書いたprintもいれていただけると条件判定がうまくいっているかの参考となるはずです)

一般論として、もはやtemp_subjectは不要になったかと思うので、場合によってはそこを削るとかはあるかなと思います(消すと番地がずれて、動かなくなったときに手に負えるか、という話もありますので無理せず)。

[masa0924]

質問の趣旨が変わってきてしまいましたので別板で再度質問してみます。
ありがとうございます。