ARcoreとOpencv for Unity を組み合わせたい

Question

実現したいこと

OpenCV for Unityを用いて青色の部分の面積が半分になったことを認識したら、ARcoreを利用してCubeオブジェエクトを出現させたいです。

今現在できていること

• ARcoreを利用して3Dオブジェクトを重畳表示
• OpenCV for Unityを用いて青色部分の認識と青色部分の面積が半分になったことの認識

できていないこと(詰まっているとこ)

今現在できていることで述べた二つの処理を組み合わせることができていません。

青色部分の認識とその面積が半分になったことを認識するスクリプト(OpenCV for Unity)

using System.Collections;
using System.Collections.Generic;
using UnityEngine;
using OpenCVForUnity;
using OpenCVForUnity.UnityUtils;
using OpenCVForUnity.ImgprocModule;
using OpenCVForUnity.CoreModule;
using UnityEngine.UI;


public class findcontuor : MonoBehaviour
{
    WebCamTexture webCamTexture;



    [SerializeField]
    public GameObject splash;

    [SerializeField]
    public GameObject cube;

    public int Width = 640;
    public int Height = 480;
    public int FPS = 30;



    private readonly static Scalar blue_lower = new Scalar(110, 50, 50);//(H,S,V)??
    private readonly static Scalar blue_upper = new Scalar(130, 255, 255);//(H,S,V)??

    public GameObject text_object = null; // Textオブジェクト

    

    // もしWebCamでやりたかったらStart()でWebCamを起動します。
    // 画像を読み込む場合は同じくStart()でテクスチャに画像を読み込ませれば以下同じように動きます。
    void Start()
    {
        
        WebCamDevice[] devices = WebCamTexture.devices;
        webCamTexture = new WebCamTexture(devices[0].name, Width, Height, FPS);
        GetComponent<Renderer>().material.mainTexture = webCamTexture;
        webCamTexture.Play();

    }


    void Update()
    {

        //Matを生成する
        Mat imgMat = new Mat(webCamTexture.height, webCamTexture.width, CvType.CV_8UC3);

        //Texture→Mat
        Utils.webCamTextureToMat(webCamTexture, imgMat);


        //ガウシアンフィルターによる平滑化
        Mat imgMat2 = new Mat(webCamTexture.height, webCamTexture.width, CvType.CV_8UC3);
        Imgproc.GaussianBlur(imgMat, imgMat2, new Size(5, 5), 0);

        // BGRからHSVに変換
        Mat hsvMat = new Mat(webCamTexture.height, webCamTexture.width, CvType.CV_8UC3);//CV_8UC3??
        Imgproc.cvtColor(imgMat2, hsvMat, Imgproc.COLOR_RGB2HSV);

        //medianBlur化
        Mat blurMat = new Mat(webCamTexture.height, webCamTexture.width, CvType.CV_8UC3);//CV_8CU3??
        Imgproc.medianBlur(hsvMat, blurMat, 3);

        // 画像の平坦化
        Imgproc.equalizeHist(blurMat, blurMat);


        //2値化
        Mat binMat = new Mat(webCamTexture.height, webCamTexture.width, CvType.CV_8UC3);//CV_8CU3??
        Core.inRange(blurMat, blue_lower, blue_upper, binMat);

      

        //輪郭を抽出して抽出した輪郭を描く

        List<MatOfPoint> Contours = new List<MatOfPoint>();
        Mat Hierarchy = new Mat();

        Imgproc.findContours(binMat, Contours, Hierarchy, Imgproc.RETR_EXTERNAL, Imgproc.CHAIN_APPROX_SIMPLE);//２値化したMatに対して輪郭を見つける


        // オブジェクトからTextコンポーネントを取得
        Text score_text = text_object.GetComponent<Text>();

        //最大領域を見つける
        int maxIdx = 0;
        double maxArea = 0.0;
     
        for (int i = 0; i < Contours.Count; i++)
        {
            double tmpArea = Imgproc.contourArea(Contours[i]);
            if (maxArea < tmpArea)
            {
                maxArea = tmpArea;
                maxIdx = i;
            }
        }


        score_text.text = "maxArea：" + maxArea;
 

        void cut()
        {
            if (maxArea > 3000 && maxArea < 6000)
            {
                Imgproc.putText(imgMat, "Cut!", new Point(5, imgMat.rows() - 70), Imgproc.FONT_HERSHEY_SIMPLEX, 1.0, new Scalar(255, 0, 0, 255), 2, Imgproc.LINE_AA, false);
                //splash = Instantiate(splash, new Vector3(-20, 0, 10), Quaternion.identity);
                //cube = Instantiate(cube, new Vector3(-20,0,50), Quaternion.identity);
            }
        }



        for (int i = 0; i < Contours.Count; i++)
        {
            Imgproc.drawContours(imgMat, Contours, i, new Scalar(255, 0, 0), 2, 8, Hierarchy, 0, new Point());//輪郭を描くのは元のMatに対して描く
        }


        Texture2D texture_out = new Texture2D(imgMat.cols(), imgMat.rows(), TextureFormat.RGBA32, false);//元のMatに輪郭が描かれたものが表示される
        Utils.matToTexture2D(imgMat, texture_out);
        gameObject.GetComponent<Renderer>().material.mainTexture = texture_out;



    }
}