GASでGmailに来た特定のメールアドレスをスプレッドシートに転記しているのですが、定時でトリガーが作動するたびに重複して追加されてしまいます。重複なくメールを転記したいです。

Question

実現したいこと

スプレッドシートに重複無くメールが転記されるようにしたいです。

前提

GASでGmailに来た特定のメールアドレスをスプレッドシートに転記しているのですが、定時でトリガーが作動するたびに重複してしまいます。重複なくメールを転記したいです。
※当方、GASのコードを記述できるわけではなく、ChatGPTに記述してもらった素人です。

発生している問題・エラーメッセージ

メールの転記部分に関しては問題なく出力されるのですが、トリガーが作動するたびに以前転記したメール内容も重複して転記してしまいます。

該当のソースコード

Gmailからスプレッドシートに出力される部分のコードです。
重複なく出力されるようコードを組んでもらったのですが、トリガーが起動するたびに以前転記したメールも重複してスプレッドシートに追加されてしまいます。

var existingData = sheet.getDataRange().getValues().slice(1);
var newData = [];

for (var i = 0; i < threads.length; i++) {
  var messages = threads[i].getMessages();
  for (var j = 0; j < messages.length; j++) {
    var date = messages[j].getDate();
    var htmlBody = messages[j].getBody();
    var plainBody = extractPlainTextFromHTML(htmlBody);
    var trimmedBody = removeUnnecessaryTextAndWhitespace(plainBody);

    var isDuplicate = existingData.some(function (row) {
      return row[0].getTime() === date.getTime() && row[1] === trimmedBody;
    });

    if (!isDuplicate) {
      newData.push([formatDate(date), trimmedBody]);
    }
  }
}

全体のソースコード

function myFunction() {
  var subjectToSearch = "在庫数低下";
  var sheetName = "販売履歴メタ";

  var threads = GmailApp.search("subject:" + subjectToSearch);
  var sheet = SpreadsheetApp.getActiveSpreadsheet().getSheetByName(sheetName);

  if (!sheet) {
    sheet = SpreadsheetApp.getActiveSpreadsheet().insertSheet(sheetName);
    sheet.appendRow(["販売日", "本文"]);
  }

  threads.sort(function (a, b) {
    return a.getLastMessageDate() - b.getLastMessageDate();
  });

  var existingData = sheet.getDataRange().getValues().slice(1);
  var newData = [];

  for (var i = 0; i < threads.length; i++) {
    var messages = threads[i].getMessages();
    for (var j = 0; j < messages.length; j++) {
      var date = messages[j].getDate();
      var htmlBody = messages[j].getBody();
      var plainBody = extractPlainTextFromHTML(htmlBody);
      var trimmedBody = removeUnnecessaryTextAndWhitespace(plainBody);

      var isDuplicate = existingData.some(function (row) {
        return row[0].getTime() === date.getTime() && row[1] === trimmedBody;
      });

      if (!isDuplicate) {
        newData.push([formatDate(date), trimmedBody]);
      }
    }
  }

  if (newData.length > 0) {
    newData.sort(function(a, b) {
      return new Date(a[0]) - new Date(b[0]);
    });

    sheet.getRange(sheet.getLastRow() + 1, 1, newData.length, newData[0].length).setValues(newData);
  }
}

function extractPlainTextFromHTML(html) {
  var plainText = html.replace(/<[^>]+>/g, '');
  return plainText;
}

function removeUnnecessaryTextAndWhitespace(text) {
  var productIndex = text.indexOf("商品情報");
  var recentIndex = text.indexOf("直近");

  if (productIndex !== -1 && recentIndex !== -1 && productIndex < recentIndex) {
    return text.substring(productIndex + 4, recentIndex).replace(/\s+/g, '');
  } else if (productIndex !== -1) {
    return text.substring(productIndex + 4).replace(/\s+/g, '');
  } else if (recentIndex !== -1) {
    return text.substring(0, recentIndex).replace(/\s+/g, '');
  } else {
    return text.replace(/\s+/g, '');
  }
}

function formatDate(date) {
  var year = date.getFullYear();
  var month = ("0" + (date.getMonth() + 1)).slice(-2);
  var day = ("0" + date.getDate()).slice(-2);
  return year + "/" + month + "/" + day;
}

補足情報（コードの説明）

1. subjectToSearch変数に検索するメールの件名（"在庫数低下"）を指定します。
2. sheetName変数にスプレッドシートのシート名（"販売履歴メタ"）を指定します。
3. GmailApp.searchを使用して、指定された件名を持つメールをGmailから検索します。検索結果はthreadsに格納されます。
4. SpreadsheetApp.getActiveSpreadsheet()を使用して、アクティブなスプレッドシートを取得します。
5. SpreadsheetApp.getActiveSpreadsheet().getSheetByName(sheetName)を使用して、指定されたシート名のスプレッドシートを取得します。もし存在しない場合は、新しいシートを作成してsheetに格納します。その際、ヘッダー行（["販売日", "本文"]）を追加します。
6. threadsのメールを送信日時でソートします。
7. sheet.getDataRange().getValues().slice(1)を使用して、既存のスプレッドシートのデータ（"販売日"と"本文"のペア）を取得します。slice(1)はヘッダー行を除外するための処理です。
8. 重複を避けるために、新しいメールのデータと既存のデータを比較します。重複しない場合、newDataに新しいデータ（"販売日"と"本文"のペア）を追加します。
9. もしnewDataにデータが存在する場合、newDataを日付でソートします。
10. sheet.getRange(sheet.getLastRow() + 1, 1, newData.length, newData[0].length)を使用して、スプレッドシートの最後の行に新しいデータを追加します。

Comments

[YellowGreen]

スプレッドシートのデータは時刻部分がクリアされている日付なので
メールから取得した日付も時刻部分をクリアして比較する必要があり、
このことが原因で同一メールの判定ができていない可能性があります。

var date = messages[j].getDate();
の後に
date.setHours(0, 0, 0, 0);
を追加してみるとどうなりますか？

[attercop]

メッセージIDがメールごとにユニークですので、シートに保持して取得済かどうか判定されてはどうでしょうか。

messages[j].getHeader('Message-ID')

Answer 1

メールを取得する際に日時指定してはどうですか？
そして、取得し終わったらその最終日時を覚えておいて、次回のメール取得時にその時間を開始日時とすれば、以前に取得したメールを再度取得しないと思いますが。

  const date = new Date();    //現在時刻を取得（本当なら最終のメールの時間とする）
  const now = Math.floor(date.getTime()/1000); //ミリ秒単位なので秒に変換

  var threads = GmailApp.search(`after: ${now}` + " subject:" + subjectToSearch);

といった感じで指定の日時以降のメールを検索できます。

もしくは未読のメールのみ対象とするとか

var threads = GmailApp.search("is:unread subject:" + subjectToSearch);

とすれば未読のメールが対象となります。
既読にするには

  for (var i = 0; i < threads.length; i++) {
    threads[i].markRead();
    var messages = threads[i].getMessages();

とすればいいでしょう。

Comments

[mii224]

ご丁寧にありがとうございます。ご提案頂いたように読み込んだ最終メールをセルに入力しておき、そのセル以降のメールを取得すると指定したところ上手くゆきました。また何かありましたら、どうぞご指導よろしくお願いいたします。