Opencvで色認識させて、カメラ画像に日本語を表示させたい。

Question

現在、Webカメラ画像からリアルタイムに青色を認識させ、青色を検出した時のみカメラ画像に日本語を表示させようとしています。

import numpy as np
import cv2
from PIL import ImageFont, ImageDraw, Image

cap = cv2.VideoCapture(0)

While(1):
    _, frame = cap.read()
    hsv = cv2.cvtColor(frame, cv2.COLOR_BGR2HSV)

    lower_light_blue = np.array([100, 45, 70])
    upper_light_blue = np.array([105, 255, 255])
    
    mask = cv2.inRange(hsv, lower_light_blue, upper_light_blue)
    res = cv2.bitwise_and(frame,frame, mask= mask)
    contours, hierarchy  = cv2.findContours(mask, cv2.RETR_TREE, cv2.CHAIN_APPROX_SIMPLE)
　　
　　if mask.any():
       message = '青色 検出'
       fontpath ='./droid/DroidSansFallbackFull.ttf' 
       font = ImageFont.truetype(fontpath, 32) 
       img_pil = Image.fromarray(frame)
       draw = ImageDraw.Draw(img_pil)
       position = (100,800)
       draw.text(position, message, font = font , fill = (0, 255, 0, 0) )
       cv2.imshow("frame",np.array(img_pil)) 
   
    else:
        pass
      
    cv2.imshow("frame",frame) 
    cv2.imshow('mask',mask)
    cv2.imshow('res',res)
    k = cv2.waitKey(5) & 0xFF
    if k == 27:
        break

cv2.destroyAllWindows()

このプログラムを実行させると、「frame」と「mask」と「res」の３つのウインドが開きます。「frame」にはカメラの画像が写りますが、青色の物体をカメラの前に持ってきても「frame」に「青色 検出」と表示されません。
「cv2.imshow("frame",np.array(img_pil)) 」とその下「cv2.imshow("frame",frame) 」の書き方がわるいのでしょうか？

ご教授のほどお願い申しあげます。

Comments

[退会済みユーザー]

1. 青色が検出されたときのmask.any():の内側にprint("blue")のような「ちゃんと青色が検出できた」ことを保証できる対策を仕込み、ちゃんと青色が確認できていることを確認お願いします。
2. 試しに日本語を半角英語にして試してもらえますか？日本語だからフォントを画像に書き込めない、という可能性があるためです。

[sp1200]

ご回答ありがとうございます。
「print」文で「blue」もきちんと反応します。また、半角英数にしても一切何も表示されません。pillowを使用せず「puttext」で日本語を表示させようとして「？？？？」、「□□□□」、「☒☒☒☒」となるような表示も一切されません。

[yominet]

ちょっと昔の記憶でOpenCVの仕様が変わっていたらごめん・・と前置きして

imshowは、描画待機用のバッファに転送するだけで描画しない。
実際に画面に描画されるタイミングはwaitKey()を呼んだとき。
私の読み違えがなければ、このソースだとwatiKeyのタイミングでは
かならずframeの内容しか表示されない状態になっていると思います。

[sp1200]

ご回答ありがとうございます。
たしかにそうで、リアルタイムのカメラ画像「frame」が表示されるのみなんです。
ちなみにプログラムの下から８行目「cv2.imshow('frame',frame) 」を削除して実行させて、青色の物体をカメラの前に持ってくるとると「frame」画面に「青色 検出」と表示されるリアルタイム画像が表示されますが、青色の物体を取り去ったとたん、「frame」画面は静止画になります。

Answer 1

解決しました。fourteenlength様とyominet様とやり取りしている内に、「if mask.any():」の後の条件「else:」に「cv2.imshow('frame',frame) 」を持ってくればよいことに気づきました。慌てていて気づきませんでした。お二人、ありがとうございました。