BeautifulSoupでGoogle検索結果のタイトルとリンク先を取得する方法

Question

前提・実現したいこと

一応、動きますが不格好な書き方をしている気がしています。
もう少しきれいなコードの書き方があれば、ご教授いただきたいです。よろしくお願いいたします。

発生している問題・エラーメッセージ

特に発生していません。たぶん。。

該当のソースコード

import requests
import bs4
import re
from time import sleep
import urllib

url="https://www.google.co.jp/search?q=アップル"

get_url_info = requests.get(url)
bs4Obj = bs4.BeautifulSoup(get_url_info.text, 'lxml')

for page_title in bs4Obj.select("h3.r a"):
    print(page_title.get_text())
    raw_page_url = page_title.get("href").replace("/url?q=", "")
    unquote_page_url = urllib.parse.unquote(raw_page_url)
    print(re.sub(r'&sa=.+', "", unquote_page_url))
    sleep(5)

補足情報（FW/ツールのバージョンなど）

AnacondaのSpyderで作業しています。

Answer 1

私ならこうかな。

from urllib.parse import parse_qsl
from urllib.parse import urlparse

from bs4 import BeautifulSoup
from requests import get as GET


html = GET("https://www.google.co.jp/search?q=アップル").text
bs = BeautifulSoup(html, 'lxml')

for el in bs.select("h3.r a"):
    title = el.get_text()
    url = dict(parse_qsl(urlparse(el.get("href")).query))["q"]
    print(title)
    print("  ", url)

Comments

[退会済みユーザー]

かなりスッキリとしました！ご回答ありがとうございます。

質問とずれますが、Pythonの勉強ってどのようにされておられるんですか？
今回のコードはネットで探してコピペして作成したものですが、YouheiSakuraiさんにご教授いただいたようなものには行き当たりませんでした。（探す時間が足りない。探し方が悪いという事もありますが。。）

[YouheiSakurai]

常に書いて、書き方を工夫するようにしています。あとは読む努力もしています。標準ライブラリのコードは暇な時に読むようにしています。あとはteratailでいろんな質問に対して考えを働かせるようにしています。あと、きれいに書く上ではPEP8やFlake8（hacking）で自分を常に縛ることも大切かなぁと。

録音再生（＝コピペ）ではなく、自分の言葉できれいに丁寧に話す、という感覚で書くと良いと思います。

[退会済みユーザー]

ご回答ありがとうございます。耳の痛いお言葉です。。。orz

・・・言い訳ですが、書籍は一応読んだりしていますが、ぜんぜん身になっていません。
ご教授いただいた事を少しでも実践できるよう、心がけたいと思います。ありがとうございました。

[YouheiSakurai]

すいません、耳を痛めるつもりは全然ありませんでした。ただ自分はそうしているし、そうすると良いと思う、というだけです。お互い頑張りましょう！

[退会済みユーザー]

ご回答ありがとうございます！頑張りましょう！

すいません。だなんてとんでもないです。恐縮です。。
後から見た時、「このコード何をやってんのやろ？」と自分でも解からんようなものを作らないように頑張りたいと思います。