サーバー上の.asarファイルをhttpとfsでローカルにダウンロードする方法

Question

# やりたいこと
- Webサーバー上にあるasarファイルをNode.jsの`fs`モジュールと`http`モジュールでローカルにダウンロードしたい
- `request`モジュールで実装していたが、`request`は非推奨のため、今後の保守のことも考え`fs`と`http`(今後非推奨になることが恐らくない)モジュールだけで実装したい

# 現状
- Web記事上にある`fs`と`http`でバイナリ(画像)ファイルをダウンロードする方法のコードを写してasarファイルで試してみたが、`createWriteStream`で生成されたファイルに中身がパイプで入れられれいなかった。
- 上記の方法では画像ファイルは問題なくダウンロードできた

以下コード例
```
        // originalfs = original-fs
        var downloadFile = function (url, dest, cb) {
            var file = originalfs.createWriteStream(dest);
            https.get(url, function (res) {
                //res.setEncoding('binary');
                res.pipe(file);
                file.on('finish', function () {
                    res.pipe(file);
                    console.log('finish');
                    file.close(cb);
                });
            });
        };

// 変数urlは省略
        downloadFile(url, 'rendertest.asar', function (err) {
            console.log('end');
            console.log(err);
        });
```

# 疑問

- なぜ画像はできたのにasarファイルはできないのか？
- asarファイルはバイナリファイルではないのか？
- asarファイルは`request`でしかダウンロードできないのか？
- `node-fetch` / `axios` / `got`等、どのモジュールでやるのがいいのか？

よろしくお願いいたします。

# 追加

## 画像はできたのにasarファイルはできなかった原因について
画像はネット上のもの(普通のサーバーにある)を引っ張ってきたがasarファイルはGoogle Drive上で[drv.tw](https://www.drv.tw/)を使いホスティングしていたのが原因

ローカルホストのサーバーからならasarファイルはダウンロードできた。

### Google Driveの使用した流れについて
ホスティングしたサイトのURLに行ってファイルをダウンロードしようとすると、このようなページが表示される

![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2022-06-10/aed1f7a6-75dd-433f-8f61-5d8d21242c6e.png)

このままだとダウンロードできないので、開発者ツールから「このままダウンロード」のところのformタグの`action`属性を見ることにした。

![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2022-06-10/4fa33c96-732f-47c9-93ba-286a321fd988.jpeg)

POSTのフォームタグで、GETのパラメータがあるURLだが、このURLにアクセスしたらファイルがダウンロードできたので、`request`モジュールでこのURLを指定してasarファイルをダウンロードすることができた

**問題はこのURLで`http.get`でアクセスした時になぜか303のステータスコードになってダウンロードできないことである**

このURLでも`request`ならダウンロードできたので、303が出ても何かしらの処理をしてダウンロードができる？？

Accepted Answer

# 結論

このコードでいける

```
/**
 * http.get
 * @param {*} url ダウンロードするファイルのURL
 * @param {*} outURL 出力するファイルのURL
 */
const get = (url, outURL) => {
    const req = https.get(url, (res) => {
     
        console.log(res.statusCode); // 303が返ってくる
        console.log(res.statusMessage);

// 303だった場合locationを見てそこから取得
        if (res.statusCode === 303) {
            get(res.headers.location, outURL) // 再帰
            return
        }
        // ダウンロードした内容をそのまま、ファイル書き出し。
        const outFile = originalfs.createWriteStream(outURL);
        res.pipe(outFile);

// 終わったらファイルストリームをクローズ。
        res.on('end', function () {
            console.log('end');
            outFile.close();
            return
        }); 
    });

// エラーがあれば扱う。
    req.on('error', function (err) {
        console.log('Error: ', err);
        return;
    });

}

// get('ダウンロードするファイルのURL', '出力するファイルのURL' )
```

Google Driveだと`303`のステータスコードが返ってくるので、その場合は`res.headers.location`を`get()`の第一引数に渡してもう一度処理をする。

# これから検討すること

- ネット非接続時などの失敗した時のエラー処理
- 非同期で実行
- バージョン管理

# 追加

エラー処理と非同期処理

```
const https = require('https')
const originalfs = require('original-fs')

/**
 * http.get
 * asarのダウンロード・置き換え
 * @param {*} url ダウンロードするファイルのURL
 * @param {*} outURL 出力するファイルのURL
 */
const asarDownLoad = async (url, outURL) => {

try {
        return await new Promise((resolve, reject) => {

const req = https.get(url, async (res) => {

console.log(res.statusCode) // 303が返ってくる
                console.log(res.statusMessage)

// 303だった場合locationを見てそこから取得
                if (res.statusCode === 303) {
                    await asarDownLoad(res.headers.location, outURL) // 再帰
                    resolve(true) //trueを返す
                    return
                }
                // ダウンロードした内容をそのまま、ファイル書き出し。
                const outFile = originalfs.createWriteStream(outURL)
                res.pipe(outFile)

// 終わったらファイルストリームをクローズ。
                res.on('end', () => {
                    console.log('end')
                    outFile.close()
                    resolve(true) // trueを返す
                })
            })

// エラーがあれば扱う。
            req.on('error', (err) => {
                console.log('Error: ', err)
                reject(false) // falseを返す
            })
        })
    } catch (err) { // rejectのfalseをキャッチ
        console.log(err)
        return err // falseを返す
    }

}

exports.asarDownLoad = asarDownLoad
```

やりたいこと

現状

疑問

追加

画像はできたのにasarファイルはできなかった原因について

Google Driveの使用した流れについて

結論

これから検討すること

追加

関連した質問