Pythonで物体をトリミング

Question

前提・実現したいこと

Pythonで物体をトリミングしたいです。
以下の図で、左の元画像に対して、右のような赤枠で囲んだ範囲をトリミングしたいと考えています。
そこで、この赤枠を設定するためのアイデアをご教示いただけると大変ありがたく存じます。

試したこと

cv2.boundingRect() でやろうとしましたが、下側の左右に伸びているやつのせいで、左上の座標がうまく取得できていません…（図の緑枠）
ただし、高さはうまく取得できています。

補足情報（FW/ツールのバージョンなど）

Python3.6(anaconda), Windows11, opencvのVersionは3.4.1です。

Answer 1

緑枠内の画像領域に関して
x座標毎に白画素の個数を数える等して，一定個数以上の白画素が存在するx範囲を見つければよいのではないでしょうか．

---

その提示画像に特化したような処理で良いならば，
緑枠の位置に「緑枠内画像を上下反転したもの」をANDしてやるとかしてやれば赤枠の横幅を得られるように見えます．

Comments

[fana]

なんつーか，こう，もうちょっと問題をきちっと定義した方が良いのではないかな，と．

話次第では
上下方向だけの erode によって薄い部分が消滅した結果から横幅を取るとかいう処理の方が良いのかもしれんし，
何ならもう単純にパターンの上半分だけを用いて幅を取るとかしても良いのかもしれんし．

[fana]

他にも，

・y座標毎にx方向の範囲に関する推定値を出し，その結果から多数決とかで決めてやる
・パターンの輪郭に矩形をダイレクトに当てはめてやる（「ロバスト推定」で横長部分の影響を除く感じで）

とか．

[itsuko]

ご回答ありあがとうございます。
まず、自身の質問力の無さについて、ご指摘ありがとうございます。
素人ゆえ、これが定義不足であると言うことに気づかず、ご回答より初めて定義不足と推察できました。
頂いた中で、
「何ならもう単純にパターンの上半分だけを用いて幅を取る」
を試してみた所、うまく座標を得ることができました。ありがとうございます。他のご提案は、申し訳ありませんが、自身の実力不足でプログラムを組めそうにないので、おいおいやらせていただきます。

ありがとうございました！

[fana]

> 定義不足

要は，やりたいこと（今回は赤枠の幅を求めること）において「どういうところに困っているのか？」「何が障害となっているのか？」次第で考えることが変わり得る，という話ですね．

そういう話が何もない（何を押さえた話が必要なのかが不明である）質問だと，どうしても「質問に提示された絵だけにしか通用しないような話」みたいなのがてきとーに回答されちゃったりする（今のこの状況がまさにそう）んだけど，提示された絵が話を簡単に説明するための単なる模式図だったならば，てきとーに回答された話では「実際の処理対象画像」には通用しないかもしれないわけで．

Answer 2

求めるものが長方形で良いなら以下です。

import cv2
img = cv2.imread('totrim.png')
img_gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
threshold =  50
xlist = np.where(img_gray.mean(axis=0)>threshold)
ylist = np.where(img_gray.mean(axis=1)>threshold)
xmax = max(xlist[0])
xmin = min(xlist[0])
ymax = max(ylist[0])
ymin = min(ylist[0])
print(xmin, xmax, ymin, ymax)
cv2.rectangle(img, (xmin, ymin), (xmax, ymax), (0, 0, 255), thickness=3)
cv2.imwrite('trimmed.png', img)

元図形

認識後

Comments

[itsuko]

ご回答ありがとうございます！

こちらも試してみたいと思います。ベストアンサーは、恐縮ですが、先にご回答いただいた方にさせていただきました。ですが、こちらの方法も是非自分で発想できるようにしていきたいと思います。

ありがとうございました！