GridViewで写真が呼び出し完了した物から順番に表示されるようにしたい

アルバムアプリを作成しています。
ストレージファイルから画像ファイルのパスを探してきて表示するまでに、2~3秒の時間がかかってしまい、固まってるんじゃないか？と不安になってしまう、UIになっています。

これを解消する為に、読み出された画像を随時GridViewに表示していくようにしたいのですが、今の仕様だと全て読み出しが完了した時にGridViewに画像が反映するような仕様になっています。

どのようにすれば、随時表示できるような仕様になるのでしょうか？

【AlbumActivity.java】

java
1    private void update(final Activity activity){
2
3         new Thread(new Runnable() {
4            @Override
5            public void run() {
6                // 全てのデータから画像データのパスを取得する
7                final List<String> filePathListAll = getPicturePath();
8                // 表示する必要がある写真のパスを入れたリスト
9                final List<String[]> filePathList = new ArrayList<>();
10                // 取得した先の写真を選別する
11                for (String filePath:filePathListAll) {
12                    try {
13                        ExifInterface exif = new ExifInterface(filePath);
14                        if(exif.getAttribute(ExifInterface.TAG_DATETIME) != null) {
15                            setAdapterFile(activity,filePathList,exif,filePath);
16                        }
17                    }catch (Exception e){
18                    }
19                }
20                filePathListAll.clear();
21            }
22        }).start();
23    }
24
25   private void setAdapterFile(final Activity activity, final List<String[]> pathDatas, final ExifInterface exif, final String filePath){
26
27        final List<String[]> pathData = pathDatas;
28
29        new Thread(new Runnable() {
30            @Override
31            public void run() {
32
33                // 撮影日時を取得して、該当するものだけパスをリストに入れる
34                if (boolDate(exif.getAttribute(ExifInterface.TAG_DATETIME))) {
35                    String[]pathDataArray = {filePath ,  getTAG_DATETIME(exif) };
36                    pathData.add(pathDataArray);
37                }else{
38                    return;
39                }
40                activity.runOnUiThread(new Runnable() {
41                    @Override
42                    public void run() {
43                        GridView gridView = (GridView) findViewById(R.id.gridView);
44                        final AlbumAdapter adapter = new AlbumAdapter(context, pathData);
45                        gridView.setAdapter(adapter);
46                        ImageView imageView = (ImageView)findViewById(R.id.non_picture);
47                        gridView.setOnItemClickListener(new AdapterView.OnItemClickListener() {
48                            public void onItemClick(AdapterView<?> parent, View view, int position, long id) {
49                                Intent intent = new Intent(context, PhotoActivity.class);
50                                intent.putExtra(PhotoActivity.EXTRA_PHOTO, (String) adapter.getItem(position));
51                                startActivity(intent);
52                            }
53                        });
54                    }
55                });
56            }
57        }).start();
58    }

【AlbumAdapter.java」

java
1    public AlbumAdapter(Context context, List<String[]> pathData) {
2        // コンテントリゾルバを取得し、外部メディアの画像を取得する
3        mContext = context;
4        layoutInflater = (LayoutInflater)context.getSystemService(Context.LAYOUT_INFLATER_SERVICE);
5        this.pathData = pathData;
6    }
7
8    @Override
9    public View getView(int position, View convertView, ViewGroup parent) {
10
11        ViewHolder viewHolder;
12
13        if(convertView == null){
14            convertView = layoutInflater.inflate(R.layout.content_album, parent, false);
15            viewHolder = new ViewHolder(convertView);
16            convertView.setTag(viewHolder);
17        }else{
18            viewHolder = (ViewHolder)convertView.getTag();
19        }
20
21        Bitmap thumbnail = null;
22        BitmapFactory.Options options = new BitmapFactory.Options();
23        options.inJustDecodeBounds = true;
24        BitmapFactory.decodeFile(pathData.get(position)[0], options);
25        /** 横の縮尺を求める */
26        int scaleW = options.outWidth / THUMBNAIL_WIDTH + 1;
27        /** 縦の縮尺を求める */
28        int scaleH = options.outHeight / THUMBNAIL_HEIGHT + 1;
29
30        int scale = Math.max(scaleW, scaleH);
31        options.inJustDecodeBounds = false;
32        options.inSampleSize = scale;
33        thumbnail = BitmapFactory.decodeFile(pathData.get(position)[FILEPATH], options);
34
35        viewHolder.photo.setImageBitmap(thumbnail);
36        viewHolder.time.setText(pathData.get(position)[DATE]);
37
38        WindowManager wm = (WindowManager)mContext.getSystemService(Context.WINDOW_SERVICE);
39        Display display = wm.getDefaultDisplay();
40        convertView.setMinimumWidth(800);
41
42        return convertView;
43    }
44
45    private class ViewHolder{
46        FrameLayout container;
47        TextView time;
48        ImageView photo;
49
50        public ViewHolder(View v){
51            container = (FrameLayout)v.findViewById(R.id.content_album);
52            time = (TextView)v.findViewById(R.id.timeText);
53            photo = (ImageView)v.findViewById(R.id.photoImage);
54        }
55    }