VirtualDisplay ImageReaderからBitmapを取得する際のサイズについて

前提・実現したいこと

Androidアプリを作成しています。
"MediaProjection"を使って、スクリーンをBitmapを取得するアプリを作成しています。
acquireLatestImageからImage.Planeを取得しています。

発生している問題・エラーメッセージ

Bitmapのサイズの指定が理解できておらず、
ImageReaderからBitmapにするさいに、サイズの指定がうまくいかない状態です。

他の方を参考にbitmap.copyPixelsFromBufferを使ったのですが
画像の左右に黒いPaddingの領域ができてしまいます。

ご存知の方お願いします。

該当のソースコード

java
1private static VirtualDisplay display;
2private static ImageReader imageRender;
3private int displayWidth, displayHeight;
4
5@Override
6public void onActivityResult(int requestCode, int resultCode, Intent data ) {
7
8final MediaProjection projection = mediaProjectionManager.getMediaProjection(resultCode, data);
9final DisplayMetrics metrics = getResources().getDisplayMetrics();
10
11displayWidth  	= metrics.widthPixels;
12displayHeight 	= metrics.heightPixels;
13
14imageRender = ImageReader.newInstance( displayWidth , displayHeight, PixelFormat.RGBA_8888, 1);
15imageRender.setOnImageAvailableListener(this, null);
16
17display = projection.createVirtualDisplay("Preview",displayWidth, displayHeight,
18metrics.densityDpi,DisplayManager.VIRTUAL_DISPLAY_FLAG_AUTO_MIRROR,
19imageRender.getSurface(),null, null);
20
21
22
23
24@Override
25protected void onCreate( Bundle savedInstanceState ) {
26
27final DisplayMetrics metrics = getResources().getDisplayMetrics();
28if( DEBUG ) Log.i( TAG, "widthPixels:" + metrics.widthPixels ); // widthPixels:1080
29if( DEBUG ) Log.i( TAG, "heightPixels:" + metrics.heightPixels ); //heightPixels:1776
30if( DEBUG ) Log.i( TAG, "scaledDensity:" + metrics.scaledDensity );// scaledDensity:2.5500002

試したこと

bitmapのgetWidthがDisplayMetricsと一致していない。
画面の左右に黒いPaddingができてしまう。

java
1Image.Plane plane	= image.getPlanes()[0];
2ByteBuffer  buffer	= plane.getBuffer();
3int pixelStride	= plane.getPixelStride();
4int rowStride	= plane.getRowStride();
5int rowPadding	= rowStride - pixelStride * displayWidth;
6
7if( DEBUG ) Log.i( TAG, "getPixelStride:" + ( pixelStride ) ); // 4
8if( DEBUG ) Log.i( TAG, "getRowStride:" + ( rowStride ) );     // 4608
9if( DEBUG ) Log.i( TAG, "rowPadding:" + ( rowPadding ) );	// 288
10if( DEBUG ) Log.i( TAG, "width:" + ( displayWidth + rowPadding / pixelStride ) ); // 1152
11if( DEBUG ) Log.i( TAG, "Height:" + ( displayHeight ) ); // 1776
12
13
14bitmap = Bitmap.createBitmap(
15					displayWidth + rowPadding / pixelStride, displayHeight ,
16					Bitmap.Config.ARGB_8888 );
17			bitmap.copyPixelsFromBuffer( buffer );
18			image.close();
19if( DEBUG ) Log.i( TAG, "bitmap:" + bitmap.getWidth() ); // bitmap:1152
20if( DEBUG ) Log.i( TAG, "bitmap:" + bitmap.getHeight() ); // bitmap:1776
21

bitmapのgetWidth、getHeightはDisplayMetricsと一致しているが
左右のPaddingはないが、細かい横線がたくさん表示されモザイクのような状態になる。

java
1Image.Plane plane			= img.getPlanes()[0];
2final Buffer rewBuffer	= plane.getBuffer().rewind();
3bitmap = Bitmap.createBitmap(displayWidth, displayHeight, Bitmap.Config.ARGB_8888);
4bitmap.copyPixelsFromBuffer( rewBuffer );
5img.close();
6if( DEBUG ) Log.i( TAG, "bitmap:" + bitmap.getWidth() ); // bitmap:1080
7if( DEBUG ) Log.i( TAG, "bitmap:" + bitmap.getHeight() ); // bitmap:1776
8

行動規範の内容に同意します

回答2件

自己解決

失礼しました、閉じ忘れていました。

対象をViewに表示しながらテストしたところ、bitmapからjpgへの変換時に黒枠ができていたようです。
試行錯誤していたので、bitmapの部分と思い込んでいました。

投稿2018/05/31 04:16

u-ta

総合スコア60

imageRender.setOnImageAvailableListener(this, null);

これは必要なのでしょうか？
使うのであればその部分に関連するコード、メソッドが必要だと思いますが
リンク内容

投稿2018/05/03 03:13

aja

総合スコア3733

u-ta

2018/05/03 04:38

すべて記載できておらずすみません。 @Override onImageAvailableは実装しており ImageReaderから画像が取得できるようになると呼ばれています。

aja

2018/05/03 06:12

＞すべて記載できておらず記述していないところで問題が発生していないでしょうか scaledDensity:2.5500002 ちょっと変わったdensityですがこれ以外の端末、PIXELあたりではどうなんでしょう

u-ta

2018/05/03 15:18

ちょっと古いですが、nexus5でも同様になりました。 Image.Planeからbitmap生成の方法はどんな処理がただしいのでしょうか？上記2とおりと、全ピクセルをpaddingなどを計算しながらループするサンプルをみたことがあるのですがそもそもrowPaddingなどが理解できていなくて、どちらの処理がベストなんでしょうか？

aja

2018/05/03 22:15

>どちらの処理がベスト Googleのサンプルを参考にするとか、ちょっと面倒ですが https://github.com/googlesamples/android-ScreenCapture/blob/master/Application/src/main/java/com/example/android/screencapture/ScreenCaptureFragment.java こちらのやり方は https://techbooster.org/android/application/17026/ 先にリンクを出したこちらとほぼ同じようにスクショが撮れます（フォーマットを修正しないといけませんが） https://akira-watson.com/android/screenshot.html 更にu-taさんのコードも setOnImageAvailableListenerを簡単に設定して試してもできます問題の可能性はsetOnImageAvailableListenerに関連して、コードを出していないところに起因するかもしれません実際に簡略化したものを別に作って試せば分かると思いますそれから、これは実際の画像ファイルとして確認しておかしいという話でしょうかそれとも画面に表示させたのでしょうか＞rowPaddingなどが理解できていなくてこれは、rawデータの中で画像に関係しない部分と理解するのがざっくりですが適当では細かくはフォーマット次第ですし、ネット情報から探してください＞nexus5でも同様になりました nexus5だと rowPadding:0 なのでpaddingが関係しないのでわかりやすいのでは emulatorではとくに問題はないような気がします

u-ta

2018/05/04 07:35

いま手元にないのですが Nexus５だとdisplay関連のあたいは異なりますが結果として、imageViewまた、それをサーバーにPostしたBitmapを確認すると、黒いpadding領域ができている、もしくは細かい横線がたくさん表示されモザイクのような状態になる、という状態です。 Bitmapの生成についてはもう少し調べてみますがいただいたリンクの方々も含めてほとんどの方が rowPaddingを使った実装なので一旦他の方の実装を参照して簡略化したものでもう少し調べてみます。

行動規範の内容に同意します

あなたの回答