camera.start_preview()の画面を2つ同時に表示させたい

Question

前提・実現したいこと

ラズベリーパイでヘッドマウントディスプレイのようなものを作りたいと考えています。
Picameraのcamera.start_preview()を右目用、左目用の2か所で表示させたいです。

発生している問題・エラーメッセージ

mmal: mmal_vc_port_enable: failed to enable port vc.null_sink:in:0(OPQV): ENOSPC
mmal: mmal_port_enable: failed to enable connected port (vc.null_sink:in:0(OPQV))0x2663d50 (ENOSPC)
mmal: mmal_connection_enable: output port couldn't be enabled

Backend terminated or disconnected.Fatal Python error: Segmentation fault

該当のソースコード

import picamera
from multiprocessing import Process
import time

camera = picamera.PiCamera()

def left():
    scale = 1.0
    w = int(640 * scale)
    h = int(480 * scale)
    camera.start_preview(
        fullscreen = False,
        window = (100, 300, w, h))
    sleep(1)

def right():
    scale = 1.0
    w = int(640 * scale)
    h = int(480 * scale)
    camera.start_preview(
        fullscreen = False,
        window = (500, 300, w, h))
    sleep(1)
    
    
if __name__ == '__main__':
    p = Process(target=right, args=())
    p.start()
    p.join()
    left()

試したこと

multiprocessingで右目用画面、左目用画面を並列処理で表示させようとしましたが、上記のようなエラーメッセージが表示されました。
おそらく1つのカメラを2つのプログラムが取り合っているためだと思いますが、この解決方法が分かりません。
ご教授いただければ幸いです。

Answer 1

自分ではRaspberryPiにはカメラを載せてないので詳細は知りませんし調べてもいませんが、

camera.start_preview()を右目用、左目用の2か所で表示させたいです。

とありますが、preview機能でなければいけないのですか? previewという名前からして、「とりあえず確認できる」というためのものでしかないのでは。

カメラのライブラリを使ってカメラから画像を取得して、その画像を任意のサイズで任意の位置に表示する、ようなことは出来ると思います。(表示はまた別のライブラリかも知れませんが)
もし「previewでなければいけない」ということでなければ取得した1つの画像を2つの場所に表示してやればよいだけの話のように思えるのですが、それではなにか不都合があるのですか?

Comments

[yoisho]

回答ありがとうございます。
previewでなければいけないということはありませんが、私がやりたいことは、picameraで撮影した映像をリアルタイムで表示させることです。
そのコマンドがこれしか見つかりませんでしたのでそう書いただけです。参考↓
http://igarashi-systems.com/sample/translation/raspberry-pi/usage/python-camera.html

>取得した1つの画像を2つの場所に表示してやればよいだけの話のように思えるのですが、それではなにか不都合があるのですか?
画像ではなくリアルタイムの映像ならば全く問題ありません。お手数をおかけしますが、その方法を教えていただけますでしょうか。

[thkana]

前述しましたように、自分ではRaspberryPiにはカメラも繋いでないし画像処理もやっていないので、参考になりそうなサイトをググって紹介するしかできません(つまり、あなたと状況は一緒...なんですけどね)
'picamera 動画 表示'をキーに検索して、http://lumenbolk.com/?p=1043 がヒットしました。
picameraで取り込んだフレームをOpenCVで表示しています。
これに、現在画像を表示しているところに
cv2.imshow('image2',frame)
を一行追加してやれば2面の動画が同時に表示されないでしょうか。(私は実験していないので出来るかどうかわかりませんし、うまくいかなかったときの代案もありません)
これが出来たなら、さらに'Python OpenCV サイズ変更' 'Python OpenCV ウインドウ位置' でググれば任意のサイズ、位置に画像を表示することができそうな気がします。

[yoisho]

ご協力ありがとうございます。

動作はしましたが、1画面の時点でフレームレートが3FPS程度とかなり遅くなってしまい、使用するのは難しそうです。
(私の環境はraspberry pi zero WHで、camera.start_preview()を使用した場合は20~30FPS程度です。）

因みに私も調べていたところ、私がまさに作りたいものを作成している方がいました。
https://homemadegarbage.com/rpic16
この方もラズパイゼロでのopencv実装を断念してラズパイ3にしたそうです。

とりあえず当初の
・camera.start_preview()の画面を2つ表示させる
に加えて、
・opencvを使用したプログラムの軽量化ができるかどうか
を調べていきたいと思います。

[thkana]

コンピュータのパワーを絞り出そうとするのなら、PythonじゃなくてCを使って、OpenCVのような汎用のライブラリじゃなくて専用に作り込むことになりそうな気がしますけど。
まぁ、どこまで出来るか頑張ってみて下さい。