【GAS】データが追加された差異分のみCSV取得したい

Question

CSVには、データベースからデータが定期的に追加されます。

追加分のみグーグルスプレッドシートで取得したいのですが、
やり方が分からず、全てのデータの取り込みしかできない状況です。

どなたかご教示の程よろしくお願い申し上げます。

//売上集計表　ID取得
var ss = SpreadsheetApp.getActiveSpreadsheet();
var ssName = ss.getName();
var ssId = DriveApp.getFilesByName(ssName).next().getId();
//売上集計表 システムMTシート OPEN
var ssOpen = SpreadsheetApp.openById(ssId);

function syain_import() {

var data_sh = ssOpen.getSheetByName('データ');

// 対象のCSVファイルが置かれているフォルダ名、ファイル名を定義
var folderName = "CSV保管";
var fileName = "data.csv";
var folders = DriveApp.getFoldersByName(folderName);

//フォルダとファイルの検索
while (folders.hasNext()) {
var folder = folders.next();
if (folder.getName() == folderName) {
var files = DriveApp.getFilesByName(fileName);
while (files.hasNext()) {
var file = files.next();
if (file.getName() == fileName) {

      //設定しないでShift_JISのままだと文字化けする
      var data = file.getBlob().getDataAsString("Shift_JIS"); 

      var csv = Utilities.parseCsv(data);

      //セルA1からCSVの内容を書き込んでいく
      data_sh.getRange(2,1,csv.length,csv[0].length).setValues(csv);
      return;
      
    }
  }
}

}
}

Comments

[Orlofsky]

Markdown くらいは覚えては？コードは https://teratail.com/help/question-tips#questionTips3-7 の [コード] に修正しては？

Answer 1

function syain_import() {
    //売上集計表 システムMTシート OPEN
    const sheetName = "データ";
    const sheet = SpreadsheetApp.getActiveSpreadsheet().getSheetByName(sheetName);

    // 対象のCSVファイルが置かれているフォルダ名、ファイル名を定義
    const folderName = "CSV保管";
    const fileName = "data.csv";
    const folders = DriveApp.getFoldersByName(folderName);

    //フォルダとファイルの検索
    while (folders.hasNext()) {
        var folder = folders.next();
        if (folder.getName() !== folderName) { continue; }
        var files = folder.getFilesByName(fileName);
        while (files.hasNext()) {
            var file = files.next();
            if (file.getName() !== fileName) { continue; }

            //設定しないでShift_JISのままだと文字化けする
            const data = file.getBlob().getDataAsString("Shift_JIS");

            const csv = Utilities.parseCsv(data);

            // pattern A. 消す。消せるなら消すのが確実かつ安全
            sheet.clearContent();
            //セルA1からCSVの内容を書き込んでいく
            sheet.getRange(2,1,csv.length,csv[0].length).setValues(csv);
            return;
            // pattern B. 件数が合致していて、CSVが追記のみ起こるなら使える
            const r = sheet.getLastRow();
            //セルA1からCSVの内容を書き込んでいく
            const tail = csv.slice(r-1);
            sheet.getRange(2,1,tail.length,tail[0].length).setValues(tail);
            return;
            // pattern C. A列がユニークキーだと仮定
            const existing = sheet.getDataValues().map(function(e){return e[0]}).reduce(function(a,c){return a.concat(c);},[]);
            const diff = csv.filter(function(e){return existing.indexOf(e[0]) === -1;});
            sheet.getRange(2,1,diff.length,diff[0].length).setValues(diff);
            return;
        }
    }
}

Comments

[JipvOvxMCyFrRX2]

参考にさせていただきまして、下記のようにFIXいたしました。
本当にありがとうございました！

function syain_import() {
//売上集計表 システムMTシート OPEN
const sheetName = "データ";
const sheet = SpreadsheetApp.getActiveSpreadsheet().getSheetByName(sheetName);

// 対象のCSVファイルが置かれているフォルダ名、ファイル名を定義
const folderName = "CSV保管";
const fileName = "データ.csv";
const folders = DriveApp.getFoldersByName(folderName);

//フォルダとファイルの検索
while (folders.hasNext()) {
var folder = folders.next();
if (folder.getName() !== folderName) { continue; }
var files = folder.getFilesByName(fileName);
while (files.hasNext()) {
var file = files.next();
if (file.getName() !== fileName) { continue; }

//設定しないでShift_JISのままだと文字化けする
const data = file.getBlob().getDataAsString("Shift_JIS");
const csv = Utilities.parseCsv(data);

//差分書き込み
const r = sheet.getLastRow();
const tail = csv.slice(r-1);
sheet.getRange(r+1,1,tail.length,6).setValues(tail);
return;

}
}
}

Answer 2

リンク先記事を参考にスプレッドシートに記入済みの値をとった配列とCSVから取得した配列で差分をとって、差分のみ追記してはいかがでしょうか？
Qiita:Google Apps Scriptを使って2つの2次元配列の差分を取得したい