Discord.pyでjson.decoder.JSONDecodeError: Expecting value: line 2 column 1 (char 4)が発生する

Question

Discord.pyで天気を表示するBOTを作成しているのですが、
実行するとタイトルのエラーコードが表示され実行できません。
どうすればよいでしょうか。

発生している問題・エラーメッセージ

Ignoring exception in on_message
Traceback (most recent call last):
  File "C:\Users*\AppData\Local\Programs\Python\Python38\lib\site-packages\discord\client.py", line 312, in _run_event
    await coro(*args, **kwargs)
  File "C:\Users*\Downloads\天気.py", line 40, in on_message
    resp = json.loads(resp.decode('utf-8'))
  File "C:\Users*\AppData\Local\Programs\Python\Python38\lib\json\__init__.py", line 357, in loads
    return _default_decoder.decode(s)
  File "C:\Users*\AppData\Local\Programs\Python\Python38\lib\json\decoder.py", line 337, in decode
    obj, end = self.raw_decode(s, idx=_w(s, 0).end())
  File "C:\Users*\AppData\Local\Programs\Python\Python38\lib\json\decoder.py", line 355, in raw_decode
    raise JSONDecodeError("Expecting value", s, err.value) from None
json.decoder.JSONDecodeError: Expecting value: line 2 column 1 (char 4)

該当のソースコード

#coding=SHIFT-JIS
import discord
import urllib.request
import json
import re

client = discord.Client()

citycodes = {
    "土浦": '080020',
    "水戸": '080010',
    "札幌": '016010',
    "仙台": '040010',
    "東京": '130010',
    "横浜": '140010',
    "名古屋": '230010',
    "大阪": '270000',
    "広島": '340010',
    "福岡": '400010',
    "鹿児島": '460010',
    "那覇": '471010'
}

@client.event
async def on_ready():
    print("天気")
    print(discord.__version__)

@client.event
async def on_message(message):
  if message.author != client.user:

    reg_res = re.compile(u".w (.+)").search(message.content)
    if reg_res:

      if reg_res.group(1) in citycodes.keys():

        citycode = citycodes[reg_res.group(1)]
        resp = urllib.request.urlopen('http://weather.livedoor.com/forecast/webservice/json/v1?city=%s'%citycode).read()
        resp = json.loads(resp.decode('utf-8'))

        msg = resp['location']['city']
        msg += "の天気は、\n"
        for f in resp['forecasts']:
          msg += f['dateLabel'] + "が" + f['telop'] + "\n"
        msg += "です。"

        await client.send_message(message.channel, message.author.mention + msg)

      else:
        await client.send_message(message.channel, "対応地域ではありませんでした。\n下記リストから再度検索を行ってください。\n```土浦/水戸/札幌/仙台/東京/横浜/名古屋/大阪/広島/福岡/鹿児島/那覇```")

試したこと

respに代入しているリンクが存在していなかったため、別のリンクなどを使用しましたが対応できませんでした。

Answer 1

短い回答(tl;dr)

livedoor 天気はサービスを終了しました。代わりにYahoo! JAPANが提供する気象情報APIなどをご利用ください。

長い回答

調査

シェルでcurl -Iというコマンドを使用し、レスポンスを確認すると302 Foundと表示されます。これはHTTPレスポンスステータスコードと呼ばれるもので、数字が3xx（300〜399の間）のものはリダイレクト（転送）を意味します。

$ curl -I 'http://weather.livedoor.com/forecast/webservice/json/v1?city=130010'
HTTP/1.1 302 Found
Date: Wed, 21 Oct 2020 23:57:18 GMT
Server: Apache
Location: http://www.livedoor.com/?city=130010
Connection: close
Content-Type: text/html; charset=iso-8859-1`

転送先であるhttp://www.livedoor.com/?city=130010をcurlで取得して、頭の2行を読んでみましょう。

$ curl -s 'http://www.livedoor.com/?city=130010' | head -n 2 | bat -An
   1 ␍␍␍␊
   2 <!DOCTYPE·html>␍␊

1行目の内容は␍、␍、␍、␊の4文字、そして2行目からはHTMLのタグが開始しています。これはJSONではありませんね。

解説

ここでタイトルにも載っているエラーメッセージを確認しましょう。

json.decoder.JSONDecodeError: Expecting value: line 2 column 1 (char 4)

パーツごとに分けて説明します。

json.decoder.JSONDecodeError:

JSONDecoderがJSONDecodeErrorを出しています。これはJSONのデコード中にエラーが発生したことを意味します。

Expecting value:

エラーの実メッセージ部です。値を期待したが、それが得られなかったことを意味します。

line 2 column 1 (char 4)

エラーの発生箇所です。Pythonにとっての4番目の文字、人間にとっての2行目1列目を読もうとしたところでエラーが発生したことを意味します。

これに該当する文字は<です：

  1
  ␍␍␍␊
2 <!DOCTYPE·html>␍␊

まとめ

JSONDecoderはプログラムがlivedoor 天気のAPIから受け取ったレスポンスをJSONとして読もうとしました。しかし、最初に発見した意味のある文字は<で、これはJSONの構文としてありえないものでした。結果として、「JSONの値を期待したけど、受け取れなかった」と言う内容のエラーを発生させました。この問題を修正するためには、短い回答にも書いてあるように問い合わせ先のAPIを正しくJSONを返答してくれるものに変更する必要があります。