pillowでリアルタイム映像に日本語字幕を出力させたい

Question

前提・実現したいこと

ここに質問の内容を詳しく書いてください。
OpenCVとKerasを利用して、webカメラに写されたイラストの顔を検知し判別するプログラムを作りました。
イラストを判別したときに作品名を画面上に日本語で表示させたいと思い、OpenCVは日本語に対応していないとのことなのでpillowを使って表示させようと思ったのですが、エラーが発生して実行できません。
どなたか解決方法がわかる方、教えていただきたいです。。
イラストの顔を判別するプログラムコードは以下のホームページとほぼ同じ物を書いていますのでホームページから追加した部分「」で囲んでおきます。
↓　　　　　　　　　　　　　　　　↓
https://ai-coordinator.jp/real-time-person-detection

※画像の上にpillowを使って日本語を書いてみたところできていたのでpillowのインストール等は問題ないと思います。

発生している問題・エラーメッセージ

Traceback (most recent call last):
  File "C:\Users\Taisei\Anaconda3\envs\opencv\lib\site-packages\PIL\ImageDraw.py", line 466, in Draw
    return im.getdraw(mode)
AttributeError: 'numpy.ndarray' object has no attribute 'getdraw'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "check3.py", line 83, in <module>
    main()
  File "check3.py", line 23, in main
    draw = ImageDraw.Draw(frame)
  File "C:\Users\Taisei\Anaconda3\envs\opencv\lib\site-packages\PIL\ImageDraw.py", line 468, in Draw
    return ImageDraw(im, mode)
  File "C:\Users\Taisei\Anaconda3\envs\opencv\lib\site-packages\PIL\ImageDraw.py", line 60, in __init__
    im.load()
AttributeError: 'numpy.ndarray' object has no attribute 'load'
[ WARN:0] terminating async callback

該当のソースコード

import gakusyu2 as face
import sys, os
from keras.preprocessing.image import load_img, img_to_array
import numpy as np
「from PIL import Image, ImageDraw, ImageFont」
import cv2
import time
 
cascade_path = 'C:\Users\Taisei\Anaconda3\envs\OpenCV\Lib\site-packages\cv2\data\haarcascade_frontalface_default.xml'
cascade = cv2.CascadeClassifier(cascade_path)
cam = cv2.VideoCapture(0)
color = (255, 0, 255)
 
image_size = 32
categories = ["monariza","Lady with an Ermine","Girl with a Pearl Earring"]

def main():
 
    while(True):
        ret, frame = cam.read()
        facerect = cascade.detectMultiScale(frame, scaleFactor=1.3, minNeighbors=2, minSize=(10, 10))

        「「draw = ImageDraw.Draw(frame)」」

        「「font = ImageFont.truetype('C:\Windows\Fonts\meiryo.ttc', 27)」」

        for rect in facerect:
            cv2.rectangle(frame, tuple(rect[0:2]),tuple(rect[0:2] + rect[2:4]), color, thickness=2)
            x = rect[0]
            y = rect[1]
            width = rect[2]
            height = rect[3]
            
            cv2.imwrite("frontalface.png", frame)
            img = cv2.imread("frontalface.png")
            
            dst = img[y:y+height, x:x+width]
            cv2.imwrite("output.png", dst)
            cv2.imread("output.png")
            X = []
 
            img = load_img("output.png", target_size=(image_size,image_size))
            in_data = img_to_array(img)
 
            X.append(in_data)
            X = np.array(X)
            X  = X.astype("float")  / 256
 
            model = face.build_model(X.shape[1:])
            model.load_weights("C:\python code\system2.hdf5")
 
            pre = model.predict(X)
            print(pre)
            if pre[0][0] > 0.95:
                print(categories[0])
                text = categories[0]
                font = cv2.FONT_HERSHEY_PLAIN
                cv2.putText(frame,text,(rect[0],rect[1]-10),font, 2, color, 2, cv2.LINE_AA)
                「「draw.text((10, 10), u'これはモナリザです。', fill=(255, 0, 0), font=font)」」
            elif pre[0][1] > 0.95:
                print(categories[1])
                text = categories[1]
                font = cv2.FONT_HERSHEY_PLAIN
                cv2.putText(frame,text,(rect[0],rect[1]-10),font, 2, color, 2, cv2.LINE_AA)
　　　　　　　　　「「draw.text((10, 10), u'これは真珠の耳飾りです。', fill=(255, 0, 0), font=font)」」
            elif pre[0][2] > 0.95:
                print(categories[2])
                text = categories[2]
                font = cv2.FONT_HERSHEY_PLAIN
                cv2.putText(frame,text,(rect[0],rect[1]-10),font, 2, color, 2, cv2.LINE_AA)
　　　　　　　　　 「「draw.text((10, 10), u'これは牛乳を注ぐ女です。', fill=(255, 0, 0), font=font)」」

        cv2.imshow("Show FLAME Image", frame)
        #time.sleep(0.1)
 
        k = cv2.waitKey(1)
 
        if k == ord('q'):
            break
 
    cam.release()
    cv2.destroyAllWindows()
 
if __name__ == '__main__':
    main()

試したこと

ここに問題に対して試したことを記載してください。

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Answer 1

ImageDraw.Draw(frame)はImageオブジェクトを引数に取るため、numpy.ndarrayオブジェクトには対応していません。
下記のように、numpy.ndarrayオブジェクトをImageオブジェクトに変換してからImageDraw.Draw(draw)を実行してください。

frame_img = Image.fromarray(np.uint8(frame))  # numpy.ndarray to Image
draw = ImageDraw.Draw(frame_img)

Comments

[genosuke]

ご回答ありがとうございます！
numpy.ndarrayオブジェクトをImageオブジェクトに変換しようと
numpy.ndarray = ImageDraw.Draw(frame)と実行してみたのですが
AttributeError: 'numpy.ndarray' object has no attribute 'load'とエラーが出てうまく実行できません。。
もし解決策がお分かりでしたらご回答していただきたいです。。

[cpthgli]

誤解の生じる回答であったため修正しました。

[genosuke]

ありがとうございます！