Swift OpenCVのUIImageToMatで変換した画像がOpenCVの処理でエラーとなる

Question

SwiftでOpenCVを使用し画像を変換しています。
Swift側で取得したUIImageをOpenCVへ渡し、UIImageToMatでMatへ変換した後、OpenCVの関数に引き渡しているのですが、以下のエラーとなります。
試しに、同じ画像をcv::imreadで読み込み処理を行ってみましたが、正常に処理されます。
UIImageToMatで取得したMatとcv::imreadでは違うのでしょうか。

OpenCV 4.5.2
XCode 12.4

エラー内容
terminating with uncaught exception of type cv::Exception: OpenCV(4.5.2-dev) /Users/randd03/opencv/opencv/modules/core/src/matmul.dispatch.cpp:638: error: (-215:Assertion failed) src1.size == src2.size in function 'scaleAdd'

実際は画像を切り替えて使用したいのですが、テストとして固定の画像を使用しています

//予備もとで
//UIImage.init(named: "src.jpeg")
//UIImage.init(named: "map.png")
を読み渡しています
-(UIImage *)createAlphamat:(UIImage *)src map:(UIImage *)map {
    cv::Mat srcMat;
    UIImageToMat(src, srcMat);

    cv::Mat mapMat;
    UIImageToMat(map, mapMat);

    cv::Mat dst;
    cv::alphamat::infoFlow(srcMat, mapMat, dst);   //ここでエラーになります

    UIImage * output_img = MatToUIImage(dst);
    return output_img;
}

パラメタのUIImageを使用せず、直接imreadで読み込むとエラーなしで動く

-(UIImage *)createAlphamat:(UIImage *)src map:(UIImage *)map {
    NSString *path = [[NSBundle mainBundle] pathForResource:@"src" ofType:@"jpeg"];
    cv::Mat srcMat = cv::imread([path UTF8String], cv::IMREAD_COLOR);

    NSString *path2 = [[NSBundle mainBundle] pathForResource:@"map" ofType:@"png"];
    cv::Mat mapMat = cv::imread([path2 UTF8String], cv::IMREAD_GRAYSCALE);

    cv::Mat dst;
    cv::alphamat::infoFlow(srcMat, mapMat, dst);   

    UIImage * output_img = MatToUIImage(dst);
    return output_img;

}

追記
試したこと
1.srcMat、mapMatのcols、rowsを比較しましたが同じ値でした。
2.mapMatをUIImageToMatを使用するパターン、srcMatをcv::imreadを使用するパターンでは正常に動作しました。
3.そこでデバッグエリアで po srcMat.data と実行して見るとOKの時とNGの時で値が違っていました。

Comments

[hoshi-takanori]

src1.size == src2.size と言ってるので、srcMat と mapMat のサイズを確認してみては。UIImage が余計なことをしてる可能性があるかも…。

[aaru]

srcMat.cols と mapMat.cols、srcMat.rows の mapMat.rows を比較してみたのですが同じ値でした。
また、mapMatの方は UIImageToMat を使用、srcMat は cv::imread を使用する組み合わせでは正常に動作しました。
そこでデバッグエリアで po srcMat.data と打つと、OKのパターンとNGのパターンで内容が全く違っていました。
なぜ変わるのでしょうか。

Answer 1

原因がわからないので、以下の様に対処しました。
処理を行いたい画像を一時保管し、UIImageを引き渡すのではなく、画像のPATHを渡し、OpenCV側でcv::imreadを使用し画像を読み込む様にしました。

修正前
-(UIImage *)createAlphamat:(UIImage *)src map:(UIImage *)map

修正後
-(UIImage *)createAlphamat:(NSString *)src map:(NSString *)map