python3のpyinstallerを使用したexe化について

Question

前提・実現したいこと

pyinstallerを用いて、pythonプログラムをexe化しようとしています。
しかし、以下に示すエラーが発生します。

発生している問題・エラーメッセージ

UnicodeDecodeError: 'utf-8' codec can't decode byte 0x83 in position 128: invalid start byte

詳細

該当のソースコード

wave.py

from scipy.optimize import curve_fit
import seaborn as sns

import sys
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt

sys.setrecursionlimit(100000)
filepath = input('please input file path.')
filename = pd.read_csv(filepath, encoding="SHIFT-JIS")
listT = []
listV = []
listT = filename['time']
listV = filename['value']

type = input('please input type.\n1:curve\r2:average')
if type == '1':
    res = np.polyfit(listT,listV,10)
    y2 = np.poly1d(res)(listT)
    plt.figure(figsize=(20,10))
    plt.plot(listT,listV,label='ori')
    plt.plot(listT,y2,label='curve_fit')
else:
    num = 10000
    b = np.ones(num)/num
    y2 = np.convolve(listV, b, mode='same')
    plt.figure(figsize=(20,10))
    plt.plot(listT,listV, label='ori')
    plt.plot(listT,y2, label='ave')
    
plt.legend()
plt.show()

input()

wave.spec

# -*- mode: python -*-
import sys
sys.setrecursionlimit(100000)

block_cipher = None


a = Analysis(['wave.py'],
             pathex=['C:\Users\user\Downloads\NewFolder'],
             binaries=[],
             datas=[],
             hiddenimports=[],
             hookspath=[],
             runtime_hooks=[],
             excludes=[],
             win_no_prefer_redirects=False,
             win_private_assemblies=False,
             cipher=block_cipher,
             noarchive=False)
pyz = PYZ(a.pure, a.zipped_data,
             cipher=block_cipher)
exe = EXE(pyz,
          a.scripts,
          [],
          exclude_binaries=True,
          name='wave',
          debug=False,
          bootloader_ignore_signals=False,
          strip=False,
          upx=True,
          console=True )
coll = COLLECT(exe,
               a.binaries,
               a.zipfiles,
               a.datas,
               strip=False,
               upx=True,
               name='wave')

試したこと

wave.pyとwave.specをサクラエディタで開き、
文字コードセットの指定でUTF-8を選択し、上書き保存しました。
その後また、pyinstallerを試しました。
結果は変わりませんでした。

補足情報（FW/ツールのバージョンなど）

以下はconda listで確認したものです。
anaconda 5.2.0
python 3.6.5

Takey様のご提示いただいたコードで実行した結果

Anaconda Promptのバッファサイズで途切れてしまったので、後半部分のみ。
実行結果

Comments

[hayataka2049]

エラーを省略せず全文掲載してみてください

[umyu]

pyinstallerを使わずにスクリプトをそのまま実行しても同様のエラーメッセージが発生しますか？

[shikasama]

エラーの詳細を追加しました。

[shikasama]

python wave.pyと実行するという意味ならば、エラーは発生しません。

Answer 1

SHIFT-JISを指定しているようですが、UTF-8でデコードしています。

from scipy.optimize import curve_fit
import seaborn as sns

import sys
import codecs as cd  # 追加
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt

sys.setrecursionlimit(100000)
filepath = input('please input file path.')
#filename = pd.read_csv(filepath, encoding="SHIFT-JIS", "ignore")  # コメントアウト
with cd.open(filepath, "r", "shift-jis", "ignore") as csv_file:    # 追加
    filename = pd.read_table(csv_file)

listT = []
listV = []
listT = filename['time']
listV = filename['value']

type = input('please input type.\n1:curve\r2:average')
if type == '1':
    res = np.polyfit(listT,listV,10)
    y2 = np.poly1d(res)(listT)
    plt.figure(figsize=(20,10))
    plt.plot(listT,listV,label='ori')
    plt.plot(listT,y2,label='curve_fit')
else:
    num = 10000
    b = np.ones(num)/num
    y2 = np.convolve(listV, b, mode='same')
    plt.figure(figsize=(20,10))
    plt.plot(listT,listV, label='ori')
    plt.plot(listT,y2, label='ave')

plt.legend()
plt.show()

input()

でどうでしょうか。"ignore"オプションはデコードエラーの部分を無視して読み込みます。

Comments

[shikasama]

ご提示いただいたようにwave.pyコメントアウト部分と追加部分を編集した後、pyinstaller wave.specを実行しましたが、うまくいきませんでした。
実行結果を追記いたしましたので、ご確認いただけると幸いです。

[takey]

あ、勘違いしていました。pyinstaller wave.specを実行したときのエラーだったのですね（最初からそう書いてある）。

エラーログを拝見したところ、c:\users\user\anaconda3\lib\site-packages\PyInstaller\compat.py でdecodeエラーが発生しています。ライブラリのバグっぽいのでgithub issueを探してみますと、似たような方がいました。

https://github.com/pyinstaller/pyinstaller/issues/3605

issueに載ってるstackoverflowのリンク先を読んでもらえば一応解決策が書いてあります。つまり、 c:\users\user\anaconda3\lib\site-packages\PyInstaller\compat.py の370行目を、

out = out.decode(encoding, errors='ignore')

と書き換えることです。

勿論これはライブラリを書き換えるということになります。

issueに挙がっていてopenになっているということはバグなのでしょう。修正されるまでは上の方法でやり過ごすというのはどうでしょうか。

[shikasama]

ご提示いただいた通り、compatt.pyを書き換えることでexe化することができました。
ありがとうございました。