urlからzipファイルを内部ディレクトリに保存したいです。

Question

①zipファイルのurlから、zipをダウンロードする
②それを解析してtextにしてパッケージの下のローカルに保存する。

②はすでにできています。
①ができずに、その２つをつなぎ合わせてみたもののエラーが出てます。

アドバイスをいただきたいです。
どうぞよろしくお願いします。

import androidx.annotation.RequiresApi;
import androidx.appcompat.app.AppCompatActivity;
import java.io.BufferedOutputStream;
import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.net.MalformedURLException;
import java.net.URL;
import java.net.URLConnection;
import java.nio.charset.Charset;
import java.util.zip.ZipInputStream;
import java.util.zip.ZipEntry;
import android.os.Build;
import android.os.Bundle;
import android.view.Gravity;
import android.view.View;
import android.widget.Button;
import android.widget.Toast;


public class MainActivity extends AppCompatActivity {

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);


        // Activity上に配置したButtonを押すと実行するようにしてみた
        Button button = findViewById(R.id.button);
        button.setOnClickListener(new View.OnClickListener() {

            //internetから直で、textにする
            @RequiresApi(api = Build.VERSION_CODES.N)
            @Override
            public void onClick(View view) {
                // 文字コード
                Charset charset = Charset.forName("MS932");
                File path = getExternalFilesDir(null); // ☆☆☆追加☆☆☆

                String url1 = "http://corpus.byu.edu/wikitext-samples/text.zip";
                URL url = null;
                try {
                    url = new URL(url1);
                } catch (MalformedURLException e) {
                    e.printStackTrace();
                }
                URLConnection connection = null;
                try {
                    connection = url.openConnection();
                } catch (IOException e) {
                    e.printStackTrace();
                }
                String redirect = connection.getHeaderField("Location");

                if (redirect != null) {
                    try {
                        connection = new URL(redirect).openConnection();
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
                InputStream a = null;
                try {
                    a = connection.getInputStream();
                } catch (IOException e) {
                    e.printStackTrace();
                }

                try (
                        //zipのurlから取得する方法
                        ZipInputStream zis = new ZipInputStream(a);
                        
                        //Assetsファイルから取得する方法
                        //InputStream is = getResources().getAssets().open("Archive.zip");
                        
                        //内部ストレージから取得する方法
                        //InputStream is=new FileInputStream(path + "/" + "Archive.zip");
                        //BufferedInputStream bis = new BufferedInputStream(is);
                        //ZipInputStream zis = new ZipInputStream(bis, charset);
                ) {

                    ZipEntry zipentry;
                    // zipの中のファイルがあるだけ繰り返す
                    // 展開後のファイルサイズ、ファイル名に注意
                    int j=0;
                    while ((zipentry = zis.getNextEntry()) != null) {

                        try (FileOutputStream fos = new FileOutputStream(path + "/" + zipentry.getName()); // 出力　https://techbooster.org/android/application/1629/　　
                             BufferedOutputStream bos = new BufferedOutputStream(fos);
                        ) {
                            byte[] data = new byte[1024]; // 1KB 調整可
                            int count = 0;
                            int i=0;
                            while ((count = zis.read(data)) != -1) {
                                bos.write(data, 0, count);
                                toastMake(j+"-"+i+"("+zipentry.getName()+"):"+count, 0, -200);
                                i++;
                            }
                            j++;
                            i=0;
                        }
                    }
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        });
    }

    private void toastMake(String message, int x, int y){
        Toast toast = Toast.makeText(this, message, Toast.LENGTH_SHORT);
        // 位置調整
        toast.setGravity(Gravity.CENTER, x, y);
        toast.show();
    }

Comments

[Y.H.]

zipファイルそのものを保存したいのでしょうか？
それとも、zipファイルの中身を展開したものを保存したいのでしょうか？

[alizona]

zipファイルを展開して保存したいです。以前にAssets に保存してあるzipをtextに変換して内部ストレージに保存するコードが完成していたので、それと組み合わせる形で、コードを書きました。

しかしながら、htmlからどのようにzipを取得していいのかがわかりません。

https://stackoverrun.com/ja/q/12653558
このサイトを参考にしました。
https://corpus.byu.edu/wikitext-samples/text.zip
サイトの中では、このようにURLの最後がzipになっているのですが、私はそのようなファイルを見つけることができません。

[Y.H.]

> String url1 = "http://www.nomadworks.co.jp/htmlsample/download.html";
これだとdownload.htmlというhtmlファイルをダウンロードしているだけですよ。
ダウンロードしたいzipのurlを記載しましょう。
参考視されたサイトではzipファイルのurlを記載されていますよね？

[alizona]

どのようにzipファイルへのリンクを確認するのかがわかりません。
というのも、zipファイル名をクリックするとインストールが開始されるだけで、zipへのリンクを表示する方法がわかりません。まずはここが解決すべき点なのですが、つまづいています。

[alizona]

スクレイピングして、zipファイルにアクセスするのでしょうか？

[Y.H.]

リンクを右クリックして「リンクのURLをコピー」でクリップボードにURLが入りませんか？
Chromeでdownload.htmlへアクセスし、表内のinfo01.zipで試すと取得できましたよ。

[Y.H.]

そもそも要件はどちらでしょうか？
１） アプリ内で指定したURL(質問記載ではdownload.html)のHTMLから
zipのURLを取り出してダウンロードしたい
２） アプリ内で指定したURLのzipファイルをダウンロードしたい

[alizona]

右クリックでURLをコピーすることはできました。
要件としては、ある別のサイトのzipファイルを毎日１つ取得したいです。
そのため(1)が当てはまると思います。

[Y.H.]

２）ということは、zipのURLは固定ではなく、毎日変わるということですね。
であれば、htmlの取得はできている(InputStream a )ので
それを解析して取得したいzipのURLを取り出してください。
取り出したzipのURLがわかれば、そのURLに対して再度アクセスしInputStreamで読み込んだものをFileOutputStreamでローカルへ保存するだけです。

[alizona]

ありがとうございます。
そのURLに対して再度アクセスしInputStreamで読み込んだものをFileOutputStreamでローカルへ保存する。
この過程では、zipファイルがtextファイルになっているのでしょうか？

[Y.H.]

> zipファイルを展開して保存したいです。
あぁこれを見落としてました。
サイトアクセスしInputStreamからZipInputStreamを生成し、FileOutputStreamでローカルへ保存する。
ですね。

とりあえず、質問記載のコードでURLにzipのURL(右クリックでURLをコピーすることはできました。のURL)を指定すれば
指定したzipを処理できませんか？

[alizona]

ありがとうございます。質問記載のURLを記載したところ、null pointerが出ました。

https://stackoverrun.com/ja/q/12653558
https://teratail.com/questions/284586
この２つのサイトを連結させたのですが、問題はありましたでしょうか？

[Y.H.]

a = connection.getInputStream();
の結果aはnullですか？

[alizona]

String redirect = connection.getHeaderField("Location");

[alizona]

このコードがnullになっているので、getHeaderFieldについて調べてみます。

[alizona]

ありがとうございます

[alizona]

https://qiita.com/b_a_a_d_o/items/afa0d83bbffdb5d4f6be
この設定が原因でした。

Answer 1

https://qiita.com/b_a_a_d_o/items/afa0d83bbffdb5d4f6be
この設定が原因でした。

その段階までアドバイスいただいた、Y.Hさんありがとうございました。