OpenCV for Processingライブラリを用いて顔部分を交換したい

Question

###前提・実現したいこと
OpenCV for Processingライブラリを用いて顔部分を交換するシステムを作っています。参考にしているのは、以下の2つのサイトです。最終的に、参考サイト2の「「モナリザの微笑」と合成」という作品のように完全に顔の淵に合うように画像をマッピングできたら良いのですが、まずは顔の大まかな楕円をカメラからとって、そこに画像が描画されるシステムを目指しています。

参考サイト１
参考サイト2

###発生している問題・エラーメッセージ
以下のコードでは、画像が顔を覆う位置に描画されないことと、顔を動かしても画像が動かないことを改善したいです。また可能であれば、カメラから作成したメッシュを用いてその楕円に合わせて画像が配置されるようにしたいです。

###該当のソースコード

import gab.opencv.*;
import processing.video.*;
import java.awt.*;
 
Capture video; //ビデオキャプチャー
OpenCV opencv; //OpenCV

PImage img;
 
void setup() {
  size(640, 480);
  //ビデオキャプチャー初期化
  video = new Capture(this, 640/2, 480/2);
  //OpenCV初期化(ビデオキャプチャーの半分のサイズ)
  opencv = new OpenCV(this, 640/2, 480/2);
  //顔の学習データを読み込み
  opencv.loadCascade(OpenCV.CASCADE_FRONTALFACE);
  //ビデオキャプチャー開始
  video.start();
  img = loadImage("face1.png");
}
 
void draw() {
  //二倍サイズで表示
  scale(2);
  //画像を読み込み
  opencv.loadImage(video);
  //カメラ画像を描画
  image(video, 0, 0 );
  
  //顔を検出
  Rectangle[] faces = opencv.detect();
  //検出した顔の周囲を四角形で描画
  noFill();
  stroke(0, 255, 0);
  strokeWeight(3);
  for (int i = 0; i < faces.length; i++) {
    //rect(faces[i].x, faces[i].y, faces[i].width, faces[i].height);
    image(img, faces[i].width/2, faces[i].height/2);
  }
}
 
//キャプチャーイベント
void captureEvent(Capture c) {
  c.read();
}

###補足情報(言語/FW/ツール等のバージョンなど)
画像のface1.pngは以下のようなサイズのものを使っています。

Answer 1

Python使いなのでJavaの勝手はわかりませんが、画像を張り付ける系の関数には、おおむね関数名(画像ファイル,開始位置x,開始位置y,幅,高さ)というセットになっていると思います。
上のコードだとimage(img, faces[i].width/2, faces[i].height/2);となっていて、開始位置x,開始位置yの情報が抜けているように思われます。

ざーっとJavaの画像処理の関数を調べましたがPythonほど出てこなくてズバリな答えができませんが、そこに問題があるように思われます。

Comments

[退会済みユーザー]

ご回答ありがとうございました