Mat画像に別の画像(png)を描画した新しいMat画像作成

Question

前提・実現したいこと

OpenCv(c++)で元のMat画像上に別のpng画像を描画した新しいMat画像を作成したいです。
（前・後景が合成されたMat画像を作成したい）

現状としてはdraw関数内にて下記のように,
元画像の上にpng画像を重ねている,
２回描画させた状態となっています.

// 背景画像
ofxCv::drawMat(0, 0, ofGetWidth(),ofGetHeight())

// 前景画像(png画像)
outputOfImg.draw(...)

↑元のMat画像に重ねて描画するpng画像（描画位置, 大きさ)については定めてあります.

ご教授のほどよろしくお願いいたします.

試したこと

ROIや.copyTo()等で試したのですが私の理解不足でうまく作成されませんでした.

補足情報（FW/ツールのバージョンなど）

opencv3.4.2(+opencv-contrib3.4.2)
of_v0.9.8_osx_release

Comments

[yohhoy]

元のMat画像上に別のpng画像を描画した新しいMat画像を作成したい＝2回描画して画面表示上重ねるのではなく、メモリ上に前/後景が合成されたMat画像を作り出したい という意味でしょうか？

[ks-cap]

はい, その通りです. 質問内容分かり難かったため少々文法修正いたしますね.

Answer 1

こういう意図であっていますか？

背景画像

前景画像

#include <opencv2/opencv.hpp>

int main()
{
    cv::Mat bg = cv::imread("background.jpg");  // 背景画像
    cv::Mat fg = cv::imread("foreground.png");  // 前景画像

    int x = 100, y = 100;  // 画像を貼り付ける左上の点

    // 背景画像からはみ出していないかチェック
    CV_Assert((x >= 0) && (x + fg.cols <= bg.cols));
    CV_Assert((y >= 0) && (y + fg.rows <= bg.rows));

    // 前景画像の画素を背景画像にコピー
    cv::Mat roi = bg(cv::Rect(x, y, fg.cols, fg.rows));
    fg.copyTo(roi);

    cv::imshow("sample", bg);
    cv::waitKey();
}

結果

Comments

[ks-cap]

解釈の仕方としては下記の行で,
-------------
cv::Mat roi = bg(cv::Rect(x, y, fg.cols, fg.rows));
fg.copyTo(roi);
背景画像(bg)をroiへ参照渡しをし, そのroiに対しpng画像(fg)を貼り付けているため結果として,
-------------
cv::imshow("sample", bg);
元の背景画像(bg）のroiの箇所に貼り付けられた新しいMat画像が生成された.
という解釈で合っていますでしょうか？

[tiitoi]

その解釈であっています。
cv::Mat roi = bg(cv::Rect(x, y, fg.cols, fg.rows)) として部分行列を作成した場合、roi は bg とデータを共有しています。なので、一方を変更すると、もう一方にも変更が反映されます。
その roi の画素を fg の画素をコピーして上書きしたことにより、結果として元の bg の roi の部分が fg の画素になります。

[ks-cap]

なるほど。
丁寧にお答えしてくださりありがとうございます！
参考になりました。