AWSのS3にアップロードができない【Java】
解決済
回答 2
投稿
- 評価
- クリップ 0
- VIEW 7,521
やりたいこと
画像がBufferedImageの形式で存在する時に
その画像をAWSのS3にアップロードしたいです。
環境
- Java8
- PlayFramework
現状
現在は下記のコードでアップロードをしようとするとエラーは出ないのですが、
アップロードがされません。
BufferedImage thumbnailImage = ...
// S3に対してMeta情報を付加
ObjectMetadata metaData = new ObjectMetadata();
// 拡張子を取得
String extension = SetExtension.setExtension(imageFile.getFilename());
// byte配列からS3へアップロードするInputStreamへ変換をする
ByteArrayOutputStream baos = new ByteArrayOutputStream();
ImageIO.write(thumbnailImage, extension, baos);
baos.flush();
byte[] imageInByte = baos.toByteArray();
baos.close();
in = new ByteArrayInputStream(imageInByte);
// content-typeを設定
metaData.setContentType("image/" + extension);
// S3に保存
s3.putObject(new PutObjectRequest(BUCKET_NAME, fileName, in, metaData));
これを実行した時は下記のメッセージがコンソール上に表示されてアップロードできません。
[warn] c.a.s.s.AmazonS3Client - No content length specified for stream data. Stream contents will be buffered in memory and could result in out of memory errors.
対応
InputStreamのバイト長を予測させないといけないということで、下記のURLを参考に変更をしました。
https://groups.google.com/forum/#!topic/google-appengine-stackoverflow/yo40fKxqrv8
BufferedImage thumbnailImage = ...
// S3に対してMeta情報を付加
ObjectMetadata metaData = new ObjectMetadata();
// 拡張子を取得
String extension = SetExtension.setExtension(imageFile.getFilename());
// byte配列からS3へアップロードするInputStreamへ変換をする
ByteArrayOutputStream baos = new ByteArrayOutputStream();
ImageIO.write(thumbnailImage, extension, baos);
baos.flush();
byte[] imageInByte = baos.toByteArray();
baos.close();
in = new ByteArrayInputStream(imageInByte);
// バイト長を取得(追加)
byte[] contentBytes = IOUtils.toByteArray(in);
Long contentLength = Long.valueOf(contentBytes.length);
// content-typeを設定
metaData.setContentType("image/" + extension);
// バイト長を設定(追加)
metaData.setContentLength(contentLength);
// S3に保存
s3.putObject(new PutObjectRequest(BUCKET_NAME, fileName, in, metaData));
これでアップロード処理を行うと下記のエラーがでてしまいます。
[error] p.c.s.n.PlayDefaultUpstreamHandler - Cannot invoke the action
com.amazonaws.AmazonClientException: Data read has a different length than the expected: dataLength=0; expectedLength=19539; includeSkipped=false; in.getClass()=class com.amazonaws.internal.ReleasableInputStream; markedSupported=true; marked=0; resetSinceLastMarked=false; markCount=1; resetCount=0
at com.amazonaws.util.LengthCheckInputStream.checkLength(LengthCheckInputStream.java:150) ~[aws-java-sdk-core-1.10.62.jar:na]
at com.amazonaws.util.LengthCheckInputStream.read(LengthCheckInputStream.java:110) ~[aws-java-sdk-core-1.10.62.jar:na]
at com.amazonaws.internal.SdkFilterInputStream.read(SdkFilterInputStream.java:72) ~[aws-java-sdk-core-1.10.62.jar:na]
at com.amazonaws.services.s3.internal.MD5DigestCalculatingInputStream.read(MD5DigestCalculatingInputStream.java:98) ~[aws-java-sdk-s3-1.10.62.jar:na]
at com.amazonaws.internal.SdkFilterInputStream.read(SdkFilterInputStream.java:72) ~[aws-java-sdk-core-1.10.62.jar:na]
at com.amazonaws.event.ProgressInputStream.read(ProgressInputStream.java:151) ~[aws-java-sdk-core-1.10.62.jar:na]
at com.amazonaws.internal.SdkFilterInputStream.read(SdkFilterInputStream.java:72) ~[aws-java-sdk-core-1.10.62.jar:na]
at org.apache.http.entity.InputStreamEntity.writeTo(InputStreamEntity.java:138) ~[httpcore-4.3.3.jar:4.3.3]
at com.amazonaws.http.RepeatableInputStreamRequestEntity.writeTo(RepeatableInputStreamRequestEntity.java:153) ~[aws-java-sdk-core-1.10.62.jar:na]
at org.apache.http.entity.HttpEntityWrapper.writeTo(HttpEntityWrapper.java:89) ~[httpcore-4.3.3.jar:4.3.3]
[error] application -
どなたかご教授お願い致します。
-
気になる質問をクリップする
クリップした質問は、後からいつでもマイページで確認できます。
またクリップした質問に回答があった際、通知やメールを受け取ることができます。
クリップを取り消します
-
良い質問の評価を上げる
以下のような質問は評価を上げましょう
- 質問内容が明確
- 自分も答えを知りたい
- 質問者以外のユーザにも役立つ
評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。
質問の評価を上げたことを取り消します
-
評価を下げられる数の上限に達しました
評価を下げることができません
- 1日5回まで評価を下げられます
- 1日に1ユーザに対して2回まで評価を下げられます
質問の評価を下げる
teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。
- プログラミングに関係のない質問
- やってほしいことだけを記載した丸投げの質問
- 問題・課題が含まれていない質問
- 意図的に内容が抹消された質問
- 過去に投稿した質問と同じ内容の質問
- 広告と受け取られるような投稿
評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。
質問の評価を下げたことを取り消します
この機能は開放されていません
評価を下げる条件を満たしてません
質問の評価を下げる機能の利用条件
この機能を利用するためには、以下の事項を行う必要があります。
- 質問回答など一定の行動
-
メールアドレスの認証
メールアドレスの認証
-
質問評価に関するヘルプページの閲覧
質問評価に関するヘルプページの閲覧
checkベストアンサー
0
// バイト長を取得(追加)
byte[] contentBytes = IOUtils.toByteArray(in);
Long contentLength = Long.valueOf(contentBytes.length);
この toByteArray で in の読み込みが進んでしまい、最後まで読み切った状態になっていると思います。
// S3に保存
s3.putObject(new PutObjectRequest(BUCKET_NAME, fileName, in, metaData));
これで中身を読み出そうとしても、最後まで読み切ってしまっているので、中身の長さが0バイトになり、
Data read has a different length than the expected: dataLength=0; expectedLength=19539;
「読み込まれたデータの長さは 0バイトで期待されていた長さ19539バイトと異なっている」というエラーになっています。
バイト長を取得するのに toByteArray とかを使わなくても imageInByte の長さを取ればいいのでは?
投稿
-
回答の評価を上げる
以下のような回答は評価を上げましょう
- 正しい回答
- わかりやすい回答
- ためになる回答
評価が高い回答ほどページの上位に表示されます。
-
回答の評価を下げる
下記のような回答は推奨されていません。
- 間違っている回答
- 質問の回答になっていない投稿
- スパムや攻撃的な表現を用いた投稿
評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。
0
以下変更でいけませんか?
+ S3Object s3Object = new S3Object();
+ s3Object.setObjectContent(in);
s3.putObject(new PutObjectRequest(BUCKET_NAME, fileName, in, metaData));
+ s3Object.close();
投稿
-
回答の評価を上げる
以下のような回答は評価を上げましょう
- 正しい回答
- わかりやすい回答
- ためになる回答
評価が高い回答ほどページの上位に表示されます。
-
回答の評価を下げる
下記のような回答は推奨されていません。
- 間違っている回答
- 質問の回答になっていない投稿
- スパムや攻撃的な表現を用いた投稿
評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。
15分調べてもわからないことは、teratailで質問しよう!
- ただいまの回答率 88.09%
- 質問をまとめることで、思考を整理して素早く解決
- テンプレート機能で、簡単に質問をまとめられる
2017/01/20 18:47
こちらの方法でうまくいきました。
InputStreamについて全然理解していなかったので、しっかり理解していこうと思います。