【python】cloud vision api から返ってきたjsonデータをソートしてから使いたい

前提・実現したいこと

cloud vision apiを用いてテキスト検出をしています。
その際、各テキストボックスのx座標最大値から降順でjsonデータとして格納されているのですが、これを
x座標の最大値から降順、y座標は0からにして
画像の右上から左下に向かってテキスト検出をさせたい

該当のソースコード

↓↓↓返って来るjsonデータ↓↓↓



{
                                                        "property": {
                                                            "detectedLanguages": [
                                                                {
                                                                    "languageCode": "ja"
                                                                }
                                                            ]
                                                        },
                                                        "boundingBox": {
                                                            "vertices": [
                                                                {
                                                                    "x": 35,
                                                                    "y": 201
                                                                },
                                                                {
                                                                    "x": 47,
                                                                    "y": 201
                                                                },
                                                                {
                                                                    "x": 47,
                                                                    "y": 206
                                                                },
                                                                {
                                                                    "x": 35,
                                                                    "y": 206
                                                                }
                                                            ]
                                                        },
                                                        "text": "\u308b",
                                                        "confidence": 0.99
                                                    },

def request_cloud_vison_api(image_base64):
    api_url = GOOGLE_CLOUD_VISION_API_URL + API_KEY
    req_body = json.dumps({
        'requests': [{
            'image': {
                'content': image_base64.decode('utf-8') # jsonに変換するためにstring型に変換する
            },
            'features': [{
                'type': 'DOCUMENT_TEXT_DETECTION', # ここを変更することで分析内容を変更できる
                'maxResults': 10,
            }]
        }]
    })

    res = requests.post(api_url, data=req_body)
    return res.json()

# 画像読み込み
def img_to_base64(filepath):
    with open(filepath, 'rb') as img:
        img_byte = img.read()
    return base64.b64encode(img_byte)

# 文字認識させたい画像を./img.pngとする
img_base64 = img_to_base64('images/konan.jpg')
result = request_cloud_vison_api(img_base64)

i = 0;
for rect in result["responses"][0]["textAnnotations"]:

  x1 = rect["boundingPoly"]["vertices"][0]["x"]
  y1 = rect["boundingPoly"]["vertices"][0]["y"]
  x2 = rect["boundingPoly"]["vertices"][1]["x"]
  y2 = rect["boundingPoly"]["vertices"][2]["y"]




  print(result["responses"][0]["textAnnotations"][i]["boundingPoly"])
  print(result["responses"][0]["textAnnotations"][i]["description"])

//検出したテキストboxの四つ角の座標(0番目のx座標、降順になっている。)
//検出した文字


{'vertices': [{'x': 604, 'y': 363}, {'x': 617, 'y': 363}, {'x': 617, 'y': 411}, {'x': 604, 'y': 411}]}
引っ越しまん
{'vertices': [{'x': 603, 'y': 50}, {'x': 616, 'y': 50}, {'x': 616, 'y': 65}, {'x': 603, 'y': 65}]}
から
{'vertices': [{'x': 594, 'y': 35}, {'x': 604, 'y': 35}, {'x': 606, 'y': 86}, {'x': 596, 'y': 86}]}
トラックの上に
{'vertices': [{'x': 583, 'y': 36}, {'x': 593, 'y': 36}, {'x': 592, 'y': 71}, {'x': 582, 'y': 71}]}
売ってたん
{'vertices': [{'x': 592, 'y': 361}, {'x': 600, 'y': 360}, {'x': 600, 'y': 361}, {'x': 592, 'y': 362}]}
「
{'vertices': [{'x': 592, 'y': 371}, {'x': 601, 'y': 370}, {'x': 603, 'y': 398}, {'x': 594, 'y': 399}]}
ってたよ
{'vertices': [{'x': 595, 'y': 402}, {'x': 603, 'y': 401}, {'x': 603, 'y': 402}, {'x': 595, 'y': 403}]}
!
{'vertices': [{'x': 578, 'y': 249}, {'x': 589, 'y': 249}, {'x': 589, 'y': 278}, {'x': 578, 'y': 278}]}
そのに

補足情報（FW/ツールのバージョンなど）

python3.6.5