C# 上で射影変換するときに、OpenCVSharp4 を使いたい。 (Windows10, Visual Studio 2019, C#, .Net 4.7)

Question

本件は、次の質問に続くものです。
C# 上で画像を射影変換したい。その2 (Windows10, Visual Studio 2019, C#, .Net 4.7)

以下の経緯に述べるとおり、「一応、できるようになった」と思われます。
ただし、使用したライブラリは「OpenCvSharp-AnyCPU v2.4.10.2017306」です。
このライブラリを「OpenCvSharp4 v4.3.0.20200421」に変更しようとすると、大量のエラーが出ます。

#経緯
400x300 の大きさの画像があり、この画像の一部（四角形の部分）を引き伸ばして長方形にしようと考えています。具体的には、次の画像のような状態です。

#環境
Windows10, Visual Studio 2019, C#, .Net 4.7 の環境で作成しています。
NuGet として、OpenCvSharp-AnyCPU v2.4.10.2017306 を使用しました。

#ソースコード
次のようにしました。

using OpenCvSharp;
using OpenCvSharp.Extensions;
using System.Drawing;
using System.Drawing.Drawing2D;
using System.Windows.Forms;

namespace test20
{
    public partial class Form1 : Form
    {
        public Form1()
        {
            InitializeComponent();
            this.Size = new Size(900, 750);

            Point px1 = new Point(95, 95);
            Point px2 = new Point(360, 32);
            Point px3 = new Point(300, 240);
            Point px4 = new Point(50, 200);

            Image img = global::test20.Properties.Resources._400x300;

            // 元の画像を表示
            PictureBox p0 = new PictureBox();
            p0.Image = img;
            p0.Location = new Point(30, 30);
            p0.Size = new Size(400, 300);
            this.Controls.Add(p0);

            // 元の画像に四角形を表示
            PictureBox p1 = new PictureBox();
            Bitmap bt1 = new Bitmap(400, 300);
            Graphics gp1 = Graphics.FromImage(bt1);
            gp1.DrawImage(img, 0,0,400, 300);

            Pen skyBluePen = new Pen(Brushes.DeepSkyBlue);
            skyBluePen.Width = 4.0F;

            gp1.DrawLine(skyBluePen, px1, px2);
            gp1.DrawLine(skyBluePen, px2, px3);
            gp1.DrawLine(skyBluePen, px3, px4);
            gp1.DrawLine(skyBluePen, px4, px1);

            p1.Image = bt1;
            p1.Location = new Point(30, 360);
            p1.Size = new Size(400, 300);
            this.Controls.Add(p1);

            // 四角形で切り取って表示
            Point[] p2pt = { px1, px2, px3, px4 };
            GraphicsPath p2path = new GraphicsPath();
            p2path.AddPolygon(p2pt);
            Region p2region = new Region(p2path);
            Bitmap p2btm = new Bitmap(400, 300);
            Graphics gp2 = Graphics.FromImage(p2btm);
            gp2.Clip = p2region;
            gp2.DrawImage(img, gp1.VisibleClipBounds);

            PictureBox p2 = new PictureBox();
            p2.Image = p2btm;
            p2.Location = new System.Drawing.Point(450, 30);
            p2.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p2);


            // p2の四角形を引き伸ばして表示する
            IplImage src_img = BitmapConverter.ToIplImage((Bitmap)img);
            IplImage dst_img = Cv.CloneImage(src_img);

            // 四角形の変換前と変換後の対応する頂点をそれぞれセットする
            CvPoint2D32f[] src_pt = new CvPoint2D32f[4];
            src_pt[0] = new CvPoint2D32f(px1.X, px1.Y);
            src_pt[1] = new CvPoint2D32f(px2.X, px2.Y);
            src_pt[2] = new CvPoint2D32f(px3.X, px3.Y);
            src_pt[3] = new CvPoint2D32f(px4.X, px4.Y);

            CvPoint2D32f[] dst_pt = new CvPoint2D32f[4];
            dst_pt[0] = new CvPoint2D32f(0, 0);
            dst_pt[1] = new CvPoint2D32f(399, 0);
            dst_pt[2] = new CvPoint2D32f(399, 299);
            dst_pt[3] = new CvPoint2D32f(0, 299);

            CvMat map_matrix = Cv.GetPerspectiveTransform(src_pt, dst_pt);

            // 指定された透視投影変換行列により，cvWarpPerspectiveを用いて画像を変換させる
            Cv.WarpPerspective(src_img, dst_img, map_matrix,
                Interpolation.Linear | Interpolation.FillOutliers, Cv.ScalarAll(10));

            // 結果を表示する
            PictureBox p3 = new PictureBox();
            p3.Image = dst_img.ToBitmap();
            p3.Location = new System.Drawing.Point(450, 360);
            p3.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p3);
        }
    }
}

この時点では、エラーは出ていません。

#エラーコード
さて、上の図にあるとおり、「このパッケージは、従来型で、もう維持されなくなっているめ、非推奨になりました」とありますので、代替バッケージの OpenvSharp4 をインストールしようとしました。

まず、「OpenCvSharp-AnyCPU」をアンイストールしました。このときには、次のようにエラーが表示されました。

次に OpenCvSharp4 をインストールするために検索しました。

これを、次のようにインストールしました。

ところが、大量のエラーが表示されました。

#お聞きしたいこと
0. そもそも、インストールすべきパッケージが間違っているのでしょうか。
0. NuGet でインストールした後に、なにか設定すべきことがあるのでしょうか。
0. 「あいまいな参照」とありますので、プレフィックスをつけようとするのですが、うまく認識してくれません。あいまいな参照を回避するには、どうすればよいのでしょうか。
0. その他、正しく実行するためには、どうすればよろしいでしょうか。

お手数ですが、教えていただければ幸いです。

#追記・以下のとおり解決しました。
まず、コメントで教えていただいたとおり、OpenCvSharp4.Windows をインストールしました。

次に、コードを次のように変更しました。

using OpenCvSharp;
using OpenCvSharp.Extensions;
using System.Drawing;
using System.Drawing.Drawing2D;
using System.Windows.Forms;

namespace test21
{
    public partial class Form1 : Form
    {
        public Form1()
        {
            InitializeComponent();

            this.Size = new System.Drawing.Size(900, 750);

            System.Drawing.Point px1 = new System.Drawing.Point(95, 95);
            System.Drawing.Point px2 = new System.Drawing.Point(360, 32);
            System.Drawing.Point px3 = new System.Drawing.Point(300, 240);
            System.Drawing.Point px4 = new System.Drawing.Point(50, 200);

            Image img = global::test21.Properties.Resources._400x300;

            // 元の画像を表示
            PictureBox p0 = new PictureBox();
            p0.Image = img;
            p0.Location = new System.Drawing.Point(30, 30);
            p0.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p0);

            // 元の画像に四角形を表示
            PictureBox p1 = new PictureBox();
            Bitmap bt1 = new Bitmap(400, 300);
            Graphics gp1 = Graphics.FromImage(bt1);
            gp1.DrawImage(img, 0, 0, 400, 300);

            Pen skyBluePen = new Pen(Brushes.DeepSkyBlue);
            skyBluePen.Width = 4.0F;

            gp1.DrawLine(skyBluePen, px1, px2);
            gp1.DrawLine(skyBluePen, px2, px3);
            gp1.DrawLine(skyBluePen, px3, px4);
            gp1.DrawLine(skyBluePen, px4, px1);

            p1.Image = bt1;
            p1.Location = new System.Drawing.Point(30, 360);
            p1.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p1);

            // 四角形で切り取って表示
            System.Drawing.Point[] p2pt = { px1, px2, px3, px4 };
            GraphicsPath p2path = new GraphicsPath();
            p2path.AddPolygon(p2pt);
            Region p2region = new Region(p2path);
            Bitmap p2btm = new Bitmap(400, 300);
            Graphics gp2 = Graphics.FromImage(p2btm);
            gp2.Clip = p2region;
            gp2.DrawImage(img, gp1.VisibleClipBounds);

            PictureBox p2 = new PictureBox();
            p2.Image = p2btm;
            p2.Location = new System.Drawing.Point(450, 30);
            p2.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p2);


            // p2の四角形を引き伸ばして表示する
            Mat src_img = BitmapConverter.ToMat((Bitmap)img);
            Mat dst_img = src_img;

            // 四角形の変換前と変換後の対応する頂点をそれぞれセットする
            Point2f[] src_pt = new Point2f[4];
            src_pt[0] = new Point2f(px1.X, px1.Y);
            src_pt[1] = new Point2f(px2.X, px2.Y);
            src_pt[2] = new Point2f(px3.X, px3.Y);
            src_pt[3] = new Point2f(px4.X, px4.Y);

            Point2f[] dst_pt = new Point2f[4];
            dst_pt[0] = new Point2f(0, 0);
            dst_pt[1] = new Point2f(399, 0);
            dst_pt[2] = new Point2f(399, 299);
            dst_pt[3] = new Point2f(0, 299);

            Mat map_matrix = Cv2.GetPerspectiveTransform(src_pt, dst_pt);

            // 指定された透視投影変換行列により，cvWarpPerspectiveを用いて画像を変換させる
            OpenCvSharp.Size mysize = new OpenCvSharp.Size(400, 300);
            InterpolationFlags OIFLiner = InterpolationFlags.Linear;
            BorderTypes OBTDefault = BorderTypes.Default;
            Cv2.WarpPerspective(src_img, dst_img, map_matrix, mysize, OIFLiner, OBTDefault);

            // 結果を表示する
            PictureBox p3 = new PictureBox();
            p3.Image = dst_img.ToBitmap();
            p3.Location = new System.Drawing.Point(450, 360);
            p3.Size = new System.Drawing.Size(400, 300);
            this.Controls.Add(p3);
        }
    }
}

これにより、正常に射影変換ができました。

ありがとうございました。

Answer 1

まず、OpenCVSharp4.Windowsを使用されるのがよろしいかと思います。
こちらは、必要DLLまで全て入っているので、他にインストールする必要がありません。

また、CvPoint2D32fやBitmapConverter.ToIplImageなどOpenCV4で廃止されたものが結構ありますので、そういったものを書き換える必要がありますし、CvもCv2と変更になっています。
PointやSizeなどのDrawingとOpenCVの両方にあるものに関してですが、OpenCVに渡すものは基本OpenCvSharp.Size等OpenCVSharpのものを、コントロール等に使うものはSystem.Drawing.Point等System.Drawingのものを使ってください。

扱うイメージもIplImageからMatに変更になっていますので、こちらも変更する必要があります。

大まかに言うと
CvPoint2D32fをPoint2fに変更
IplImageをMatに変更
大きくこの2点を変更する必要があります。
この変更により、BitmapConverter.ToIplImageではなくBitmapConverter.ToMatを使うようにするなど、変更したことに合わせて細部を修正してください。

Comments

[TAKASE_Hiroyuki]

本文に追記した方法により、本件は解決しました。
ありがとうございました。

Answer 2

とりあえず、

「あいまいな参照」とありますので、プレフィックスをつけようとするのですが、

について、例えば、Point px1 = new Point(95, 95); ここのPointは、System.Drawing.Point と OpenCvSharp.Point のどちらでしょうか? ということ。省略せずに書けば、OKの筈 (多分の最初の方?)
省略する書き方もあるようですが、これが確実。
Visual Studioを使っているようですが、マウスを当てるとヘルパーが出ないでしょうか?
他も、usingの追加とか、出ないでしょうか。
自分の場合、型または名前空間が..と出たら、その名称で検索かけたりして、using または、参照の追加を行っています。(個別にはすぐに分からない...すみません)

Comments

[TAKASE_Hiroyuki]

ありがとうございます。
おっしゃるとおり、通常はヘルパーが出るのですが、それが出てきませんでしたし、Point を　「System.Drawing.Point」に書き換えても、また「OpenCvSharp.Point」に書き換えても、なぜか、エラーのままになってしまいました。

ただし、これからパッケージを OpenCvSharp4.Windows に取り替えますので、それで回避できるかも知れません。また、のちほど、返答いたします。

[pepperleaf]

> Point を　「System.Drawing.Point」に書き換えても
通常、これで消える筈ですが、、
ただ、数が多いので、結構、大変かと。(類似の問題で、以前、苦労しました)

[YAmaGNZ]

OpenCvSharp4からOpenCvSharp4.Windowsへの変更は関係ないかと思います。
OpenCvSharp4.WindowsはOpenCvSharp4とOpenCvSharp4.runtime.winのセットみたいなものですので、コンパイルだけであればOpenCvSharp4とOpenCvSharp4.Windowsは同等です。