動画ファイルを出力したい

前提・実現したいこと

https://github.com/akisato-/pySaliencyMap

上記のサイトにて公開されている、
Webカメラ映像をSaliencyMap化するソースコードに関して質問させていただきます。

こちらを動画ファイルとして保存したいと考えております。
しかし、実行しても以下のエラーが表示されてしまい、
出来上がった「output.avi」を再生することができません。 
（ファイルサイズが0KBになっています）

どうしたら、正しく動画を出力することができますか？

発生している問題・エラーメッセージ

OpenCV Error: Assertion failed (image->depth == 8) in CvVideoWriter_FFMPEG_proxy::writeFrame, file D:\Build\OpenCV\opencv-3.3.0\modules\videoio\src\cap_ffmpeg.cpp, line 272
Traceback (most recent call last):
  File "main_webcam.py", line 33, in <module>
    out.write(frame)
cv2.error: D:\Build\OpenCV\opencv-3.3.0\modules\videoio\src\cap_ffmpeg.cpp:272: error: (-215) image->depth == 8 in function CvVideoWriter_FFMPEG_proxy::writeFrame

該当のソースコード

import cv2
import matplotlib.pyplot as plt
import pySaliencyMap
import numpy as np

if __name__ == '__main__':

    capture = cv2.VideoCapture(0)

    while(True):

        retval, frame = capture.read()

        frame_size = frame.shape
        frame_width  = frame_size[1]
        frame_height = frame_size[0]
        sm = pySaliencyMap.pySaliencyMap(frame_width, frame_height)

        saliency_map = sm.SMGetSM(frame)

        cv2.imshow('Input image', cv2.flip(frame, 1))
        cv2.imshow('Saliency map', cv2.flip(saliency_map, 1))

        fourcc = cv2.VideoWriter_fourcc(*'XVID')
        out = cv2.VideoWriter('output.avi',fourcc, 20.0, (1280,720))

        while(capture.isOpened()):
                retval, frame = capture.read()

                if retval==True:
                 frame = cv2.flip(saliency_map, 1)

                 out.write(frame)

                 cv2.imshow('frame',frame)
                 if cv2.waitKey(1) & 0xFF == ord('q'):
                        break
                else:
                  break

        if cv2.waitKey(1) & 0xFF == ord('q'):
            break

    cv2.destroyAllWindows()