エラー’'utf-8' codec can't decode byte’の解決法について

Question

pythonでこのサイトを真似て、Amazon sagemakerで呼び出したモデルで推論を行いましたが、推論結果をjson.loads()しようとするとエラーが出ます。

# エラー
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xd7 in position 2: invalid continuation byte

コードはほぼサイトのと同じものを使用してますが、ラストのbyte形式の読み込みがうまくいきません。どうすれば解決できるか教えていただけないでしょうか？

# Dsフォルダに画像の保存
path='test_dir'
for idx, file in enumerate(os.listdir(path)):
    img = cv2.imread(path+'/'+file)
    img = Image.fromarray(np.uint8(np.array(img)))
    img = img.convert("RGB")
    img.save('Ds/img_{}.jpg'.format(idx))

# 画像のload
runtime = boto3.Session().client(service_name='sagemaker-runtime')
img = open('Ds/img_1.jpg', 'rb').read()

# 推論
response = runtime.invoke_endpoint(
    EndpointName='＊＊＊＊', 
    ContentType='application/x-image', 
    Body=bytearray(img))
# read the prediction result and parse the json
result = response['Body'].read()

# byteの読み込み
result = json.loads(result)
>>>
#エラー
# UnicodeDecodeError: 'utf-8' codec can't decode byte 0xd7 in position 2: invalid continuation byte

#追記（resultsの中身）

b'\n#\xd7\xce9HU\x00\n\x9f\x90\xd5\x02\n\x06target\x12\x92\x90\xd5\x02\x12\x8d\x90\xd5\x02\n\x88\x90\xd5\x02\x1c\x9c}?#o}?}>}?\xe3\t}?\xfb\xd0|?j\x93|?\xcaP|?\xb2\x08|?\xab\xba{?&\x15|?,h|?\x84\xb3|?\xf7\xf7|?:6}?\xf3n}?\xab\xa2}?\xe7\xd1}?&\xf8}?h\x1a~?S9~?dU~?\xfen~?z\x86~?\x19\x9c~?\x19\xb0~?\xf7\xd4~?\x15\xf6~?\x85\x13\x7f?\xaf-\x7f?\xf3D\x7f?\xa2Y\x7f?\x04l\x7f?\|\x7f?O\x83\x7f?\xad\x89\x7f?\xaf\x8f\x7f?[\x95\x7f?\xb6\x9a\x7f?\xc2\x9f\x7f?\x87\xa4\x7f?\x06\xa9\x7f?U\xa9\x7f?\x7f\xa9\x7f?\xa5\xa9\x7f?\xc9\xa9\x7f?\xe9\xa9\x7f?\x05\xaa\x7f?\x1f\xaa\x7f?5\xaa\x7f?\x0c\xb1\x7f?\x97\xb7\〜
中略
〜
1\xe6:\xb8\x95\x00;\xadB\x0f;E\x9a\x1f;,\xcd1;\xb2\x11F;-\xa2\;\xa4Hu;iHk;\xa0\xafa;\xcbyX;\xa3\xa3O;\xb9(G;\x05\x06?;\xb277;\x12\xce/;\x9e\x8b4;9h9;sd>;B\x81C;\xb7\xbfH;W N;c\xa4S;uLY;\n\x13\n\x05shape\x12\n:\x08\n\x06\x01\x03\xf7\x02\xda\t\x00\x00\x00'

Answer 1

endpoint_name='*****'
endpoint_response = boto3.client('sagemaker-runtime').invoke_endpoint(
    EndpointName=endpoint_name,
    Body=img,
    ContentType='image/jpeg',
    Accept = 'image/png'
)
results = endpoint_response['Body'].read()
mask = np.array(Image.open(io.BytesIO(results)))

# plot
num_classes=2
plt.imshow(mask, vmin=0, vmax=num_classes-1, cmap='jet')
plt.show()

Answer 2

UTF8で解釈できないデータパターンがある、ということなんで、そのファイルを開いて、なんの文字コードなのかを確認してみよう。

Comments

[trafalbad]

追記しました。b'\n#で始まる文字列なのですが、どのようにして読み込めばいいでしょうか？

[y_waiwai]

これを見るに、文字コード云々より前に、文字列でもないように見えます
本当にそのデータはJSONの形式なのか、から調べ直してみればどうでしょう