C++、OpenCVを使ったシーンチェンジ検出プログラムでInsufficient memoryエラーが起きる

Question

前提・実現したいこと

C++とOpenCVを使ったシーンチェンジ検出プログラムを作成中です。
動画の読み込みまではいくのですが(loaded plugin 'FFmpeg OpenCV Video I/O plugin')、その後下記のエラーが出てプログラムが止まってしまいます。
メモリが足りないというエラーらしいのですが、プログラム側の問題なのか（ソースコードを修正するべきか）環境の問題なのか（PCやVisual Studioの設定を見直すべきか）がわからないため、具体的な解決策を教えていただきたいです。
また、もっと簡単なシーンチェンジ検出ができるプログラムがあればそちらを試してみたいとも思っています。よろしくお願いします。

発生している問題・エラーメッセージ

Insufficient memory(Failed to allocate 6370099200 bytes) in cv::OutOfMemoryError, file C:\build\master_winpack-build-win64-vc15\opencv\modules\core\src\alloc.cpp, line 73

該当のソースコード

#include "stdafx.h"
#include <opencv2/opencv.hpp>

using namespace cv;

int MAE(cv::Mat pic) {	//平均絶対誤差
	cv::Mat v1,v2;
	cv::reduce(abs(pic), v1, 0, REDUCE_AVG);	//picの各列の絶対値の平均
	cv::reduce(v1, v2, 0, REDUCE_AVG);	//平均の平均=全体の平均
	return v2.data[0];	//全体の平均を返す
}

int main(void) {

	cv::VideoCapture infile;
	infile.open("C:/Users/Admin/Downloads/sample1.mp4");	//動画の読み込み
	
	double thresh = 55.55679398148148;	//閾値

	cv::Mat frame;

	int frame_cnt = 0;	//フレーム数

	int picsize[] = { 64,36 };

	cv::Mat frame_ultima;

	for (;;) {
		infile >> frame;

		cv::Mat frame_penult = frame_ultima;
		cv::resize(frame, frame_ultima, cv::Size(), picsize[0], picsize[1]);	//指定サイズにリサイズ

		cv::imshow("test", frame);
		cv::waitKey(1);

		cv::Mat diff = frame_ultima - frame_penult;	//差分画像の作成

		if (MAE(diff) >= thresh) {
			printf("Cut detected!: frame {%d}\n", frame_cnt);	//平均が閾値以上ならばシーンチェンジと判定

			frame_cnt += 1;
		}

		if (frame.empty() == true) {
			break;
		}
	}
}

試したこと

エラー内容を調べました。

補足情報（FW/ツールのバージョンなど）

Visual Studio 2017 構成：Debug x64
Windows10 64bit RAM：8GB

Answer 1

こんにちは。

cd:resize()のfx, fyパラメータは倍率です。64倍、36倍は凄い倍率と思います。
あまりに巨大な画像へのresizeを要求した結果、メモリが足りなくなっているのではないかと思います。

Comments

[退会済みユーザー]

ありがとうございます。倍率だとは知らず…
32行目cv::resizeの部分をcv::resize(frame, frame_ultima, Size(picsize[0], picsize[1]));と直してピクセル数にリサイズするよう変更したところ動画の最後まで読み込まれたのですが、シーンチェンジ判定のところで今度は別のエラーが出てしまいました。
Assertion failed (!ssize.empty()) in cv::resize
これはリサイズの指定がおかしいのか、計算結果がおかしいのか、別の箇所が原因なのかどれですか？

[Chironian]

それを考えるのはあなたですよ。私ではありません。

frame_ultimaの初期値は空ですね。その時「cv::Mat diff = frame_ultima - frame_penult; 」が、あなたの期待通りの動作をすることは確認できていますか？

[退会済みユーザー]

MAE(diff)の値を確認したところ0になっていたのと、break文がforの最後にあるため最後のフレームを読み込んだ後、読み込むものがないのに途中まで処理を続けてしまうことが原因でした。
そもそもframeをframe_ultimaにコピーしたいのにresizeでできると勘違いしていたのでframe.copyTo(frame_ultima);とし、break文をinfile >> frame;の後に移動させたところ正しく動作するようになりました。検出結果も問題ありませんでした。

初心者の質問に丁寧に答えていただき、本当にありがとうございました。