c++ 動画の顔にモザイクをかける

Question

前提

Opencvを用いたc++のプログラミングについて
動画にモザイクをかける

実現したいこと

USBカメラからの画像を顔検出で顔の部分だけ切り取り、その切り取った部分にモザイクをかけ顔にモザイクがかかるというようなことをしたいのですが、切り取った画像をモザイクにするところまでできたのですがそれを元の動画に張り付けることが出来ません。

該当のソースコード

#include <opencv2/opencv.hpp>
#include <opencv2/imgcodecs.hpp>
using namespace cv;
using namespace std;

int main(void) {
	CascadeClassifier cascade, cascade2;
	cascade.load("haarcascade_frontalface_default.xml");//正面顔情報が入っているカスケードファイル読み込み
	VideoCapture cap(0);
	if (!cap.isOpened())return -1;
	Mat original, img, bg;
	Mat roi_img;
	while (true) {
		cap >> original;
		cap >> img;
		cap >> bg;
		if (img.empty())break;
		cvtColor(bg, bg, COLOR_RGB2RGBA);
		
		vector<Rect> faces;
		cascade.detectMultiScale(bg, faces, 1.1, 4, 0, Size(20, 20));
		Mat wimage = original.clone();
		for (int i = 0; i < faces.size(); i++) //検出した顔の個数"faces.size()"分ループを行う
		{
			Rect roi1(faces[i].x, faces[i].y, faces[i].width, faces[i].height);
			wimage(roi1).copyTo(roi_img);
			double rate = (double)faces[i].width / roi_img.cols;
			resize(roi_img, roi_img, Size(), rate, rate);
			erode(roi_img, roi_img, Mat(), Point(-1, -1), 10);
			dilate(roi_img,roi_img, Mat(), Point(-1, -1), 3);

			Mat roi2 = bg(Rect(faces[i].x, faces[i].y, roi_img.cols, roi_img.rows));
			roi_img.copyTo(roi2, roi_img);
		}
		imshow("roi", roi_img);
		imshow("bg", bg);
		imshow("original", original);

		waitKey(30);
	}
	destroyAllWindows();
	return 0;
}

Comments

[fana]

> 元の動画に張り付けることが出来ません

「元の動画に張り付ける」とは具体的にどういう意味ですか？
コードを見た感じでは，bg には「モザイクをかけた」状態が反映されていそうにも見えますが，実装にはそうなっていない，というような意味でしょうか？

[fana]

あと，コードを示す場合，主題に関わらない部分は雑音となり得るので，現象が再現する必要最低限の状態を作って示すと良いかと思います．

例えば，常に３フレーム１組で取得するような処理は不思議に思えるし，そのうち１個しかempty()の判定をしないこと等も何か気になってしまう．
他にも wimageは不要に思えるし，resizeも意味がないのでは？とか何とか etc etc...
それらが質問で扱おうとする主題と関係ないのであれば，質問する際には取っ払った方が良い．
やりたいことが「画像のある一部を切り出して，それにモザイクをかけ，その結果を元々の画像の該当部分に反映させたい」で合っているなら，キャプチャ処理や検出器すらも不要．