AVAssetWriterInputPixelBufferAdaptorでリアルタイムフィルターで動画を撮影したい

Question

以下URLのコードを参考にアプリを作成しようとしています。
https://gist.github.com/yusuke024/b5cd3909d9d7f9e919291491f6b381f0#file-viewcontroller-swift-L93

func captureOutputでサンプルバッファから画像を取り出し、
フィルターをかけたあと、AVAssetWriterInputPixelBufferAdaptorにappendすることで、
フィルターをかけた動画が保存できるかと思うのですが、
AVAssetWriterInputPixelBufferAdaptorのため音声が記録できません。

リアルタイムでフィルターをかけながら、動画を撮影し、音声も記録するにはどのような方法がありますでしょうか。

Answer 1

フィルターの種類にもよりますが、一般的にはフィルターごときでピクセルを弄るのは非効率かと。
オススメは MetalKit

Comments

[hihohi]

いつも回答ありがとうございます！
avassetwriterのドキュメント(https://developer.apple.com/documentation/avfoundation/avassetwriter)
とかをみても全然仕組みがわからず困っています、、

metalkitもcaptureOutputの中でサンプルバッファからデータを取り出して処理する感じですよね？
そのあとどこに渡せば音声つきの動画として出力されるのでしょうか