swift 動画の任意のコマで画像を生成したい

Question

Swift上で、動画を読み込んだ後に、任意のコマで動画のキャプチャ画像を生成しようとしているのですが、１秒毎にしか画像が生成されません。
他に動画から画像を生成するすべがあればご教授下さい

// 生成
let player = AVPlayer(url:url)
            
playerViewController = AVPlayerViewController()
playerViewController.player = player

let asset = player.currentItem?.asset

var images = [UIImage]() 
let duration = CMTimeGetSeconds(asset!.duration)
let generator = AVAssetImageGenerator(asset: asset!)
generator.appliesPreferredTrackTransform = true
          
// 1秒毎にUIImageを生成
for index: Int in 0 ..< Int(duration) {
 let floatTime = Float64(index)
 let time = CMTimeMakeWithSeconds(floatTime, preferredTimescale: 600)
 if let image = try? generator.copyCGImage(at: time, actualTime: nil){
                    
    let image1:UIImage = UIImage(cgImage: image)
                    
    images.append(image1)
 }
}

Comments

[takabosoft]

載せてもらったコードは意図的に1秒毎に画像を生成していると思いますが、そこを細かい秒数（0.1秒単位とか）で指定しても反映されないということですか？

[sasakikik]

以下のコードで、動画の任意のコマの時間を取得したのですが、一秒間隔でしか、画像は生成されませんでした。
time = player.currentTime()
if let image = try? generator.copyCGImage(at: time, actualTime: nil){
let image1:UIImage = UIImage(cgImage: image)
images.append(image1)
}

[sasakikik]

0.1秒単位とかで指定することは可能なんでしょうか？

[takabosoft]

copyCGImage(at: で時間を渡していると思いますが、そこでは1秒単位というような制限はありません。
実際にどの時間帯の静止画が取れるかはactualTime引数の方にCMTime型のポインタを渡せばもどしてくれると思うので、printしてみてtimeと比較してみてはどうでしょう。

[takabosoft]

すでにAVPlayerでどこかのviewやレイヤーに動画が再生または表示されていて、そこと同等の画像がほしいのでしたら、画質に拘らなければそのビューやレイヤのスクショを取るという手もあるにはあります（もしかしたら動画再生の部分はスクショで取れないかもしれませんが）。

[sasakikik]

一コマ間隔のtimeを渡しても、一秒間隔でしか画像は生成されてませんでした。
AVassetから、画像を生成する方法で、コマごとの画像が生成できました。
ご意見ありがとうございました。

Answer 1

秒単位で指定しているため、1秒ごとしか画像が生成できないのは当然です。
動画のフレームレートを取得して、時間に換算して指定すべきですが、
本来AVAssetImageGeneratorの用途はサムネイル生成用途となっており、

The actual time of a generated image is within the range [requestedTime-requestedTimeToleranceBefore, requestedTime+requestedTimeToleranceAfter] and may differ from the requested time for efficiency.

と誤差を許容しなければなりません。
もしそれが許容できない場合には、以下に示されたようにサンプル単位で取得する
方法をとる必要がありそうです（実際に試していない）
https://www.reddit.com/r/swift/comments/339wfy/loading_video_frame_by_frame/

AVAssetReaderVideoCompositionOutput を利用する場合、任意のコマを簡単に抽出するようには見えないので、実際に試してみて、どちらがご自身のニーズにマッチしているのかご確認されてからどちらを利用するか決めてはいかがかと思います。

Comments

[sasakikik]

ありがとうございます。
AVassetからCGimageにして解決できました。