ラズベリーパイ4にてPyQt用いて作成したGUIで表示させているカメラモジュール画像の更新間隔が徐々に遅くなる対処法について

Question

前提・実現したいこと

Qt Designerで作成したGUIのGraphicsView内にpushButton押下後、
ラズベリーパイに接続しているカメラモジュールの画像をリアルタイムで表示させたい

pushButton押下前

pushButton押下後

発生している問題・エラーメッセージ

pushButtonを押下直後はカメラモジュールからの画像をスムーズに更新するが
徐々に画像の更新間隔が秒単位で長くなる
暫く放置した結果以下のエラー表示されました。

QImage: out of memory, returning null image
Traceback (most recent call last):
  File "/home/pi/20210331/Main.py", line 41, in set
    cv_img = cv2.cvtColor(cv_img, cv2.COLOR_BGR2RGB)
cv2.error: OpenCV(4.5.1) /tmp/pip-wheel-qd18ncao/opencv-python/opencv/modules/core/src/alloc.cpp:73: error: (-4:Insufficient memory) Failed to allocate 921600 bytes in function 'OutOfMemoryError'
pi@raspberrypi:~/20210331 $ 

該当のソースコード

Qt Designerで作成し、Python用に変換したGUI

# -*- coding: utf-8 -*-

# Form implementation generated from reading ui file '.\GUI.ui'
#
# Created by: PyQt5 UI code generator 5.14.2
#
# WARNING! All changes made in this file will be lost!


from PyQt5 import QtCore, QtGui, QtWidgets


class Ui_Form(object):
    def setupUi(self, Form):
        Form.setObjectName("Form")
        Form.resize(850, 500)
        self.graphicsView = QtWidgets.QGraphicsView(Form)
        self.graphicsView.setGeometry(QtCore.QRect(10, 10, 640, 480))
        font = QtGui.QFont()
        font.setPointSize(10)
        self.graphicsView.setFont(font)
        self.graphicsView.setObjectName("graphicsView")
        self.pushButton = QtWidgets.QPushButton(Form)
        self.pushButton.setGeometry(QtCore.QRect(660, 10, 171, 71))
        font = QtGui.QFont()
        font.setPointSize(18)
        self.pushButton.setFont(font)
        self.pushButton.setObjectName("pushButton")
        self.pushButton.raise_()
        self.graphicsView.raise_()

        self.retranslateUi(Form)
        self.pushButton.clicked.connect(Form.MyFuncStart)
        QtCore.QMetaObject.connectSlotsByName(Form)

    def retranslateUi(self, Form):
        _translate = QtCore.QCoreApplication.translate
        Form.setWindowTitle(_translate("Form", "WinodwTitle"))
        self.pushButton.setText(_translate("Form", "pushButton"))


if __name__ == "__main__":
    import sys
    app = QtWidgets.QApplication(sys.argv)
    Form = QtWidgets.QWidget()
    ui = Ui_Form()
    ui.setupUi(Form)
    Form.show()
    sys.exit(app.exec_())

起動用

import os
import sys

from PyQt5 import QtWidgets, uic
from PyQt5 import QtCore as Qc
from PyQt5 import QtGui as Qg
from PyQt5 import QtWidgets as Qw
from PyQt5.Qt import *

import cv2

import GUI

class MyForm(QtWidgets.QMainWindow):
    def __init__(self, parent=None):
        super().__init__(parent) 
        self.ui = GUI.Ui_Form()
        self.ui.setupUi(self)

        self.capture = cv2.VideoCapture(0)

        self.view = Qw.QGraphicsView()
        self.scene = Qw.QGraphicsScene()
        
    def MyFuncStart(self):
        self.timer = Qc.QTimer(self.view)
        self.timer.timeout.connect(self.set)
        self.timer.start(10)
        
    def set(self):
        ret, cv_img = self.capture.read()
        if ret == False:
            return

        Height, Width, dim = cv_img.shape

        cv_img = cv2.cvtColor(cv_img, cv2.COLOR_BGR2RGB)
        height, width, dim = cv_img.shape
        bytesPerLine = dim * width
        
        image = Qg.QImage(cv_img.data, width, height, bytesPerLine, Qg.QImage.Format_RGB888)

        item = Qw.QGraphicsPixmapItem(Qg.QPixmap.fromImage(image))

        self.scene.addItem(item)
        self.ui.graphicsView.setScene(self.scene) 
        self.ui.graphicsView.fitInView(self.scene.sceneRect(), Qc.Qt.KeepAspectRatio)
        


if __name__ == '__main__':
    app = Qw.QApplication(sys.argv)
    wmain = MyForm()
    wmain.show()
    sys.exit(app.exec_())
    

試したこと

タイマーの更新毎に以下の設定を追加しても効果はありませんでした。
self.capture.release()
cv2.destroyAllWindows()

補足情報（FW/ツールのバージョンなど）

ラズベリーパイ4 4B
ラズベリーパイ用 カメラモジュール OV5647センサー 500万画素
Python3.7.3

対処法についてアドバイスを頂けないでしょうか？
宜しくお願い致します。

Answer 1

tasuku様のアドバイスを参考し、以下のように
addItemの前に、self.scene.clear()を追加する事で解決できました。

self.scene.clear()      # <- 追加
self.scene.addItem(item)

ありがとうございました。

Answer 2

10ミリ秒ごとにカメラからの画像を表示する QGraphicsPixmapItem を毎回 QGraphicsScene に「追加」しているから表示するアイテム数が多くなり、処理が遅くなっているのかなと思います。

とりあえず試すこととしては、

• ディスプレイの更新速度と同期するように 16ms ごとの処理にする(1秒間に60フレーム換算)
• QGraphicsView/Scene ではなく、QLabel を利用し、毎回そのラベルの表示画像を差し替える

OpenCV が必須ではない場合は、QtMultimedia が提供するカメラの機能を試してみるのもいいかもしれません。

Comments

[Crew_38]

コメントありがとうございます。頂いた内容を試してみます
今後ＱＲコード読み込みに活かしていきたいと思っており、
調べてみるとOpenCVを用いた情報を多く見かけましたが、QtMultimediaでも可能か確認してみます。