質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.51%

  • Python 3.x

    8901questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

"No schema supplied." エラーにより、URLがうまく拾えません。

受付中

回答 1

投稿 編集

flag 質問者が1日前に「まだ回答を求めています」と言っています。

  • 評価
  • クリップ 0
  • VIEW 94

MacKimura

score 2

”No schema supplied. Perhaps you meant http:///search?q=EV+charge?” というエラーが発生し解決できません。
どなたかご教示いただけますでしょうか。

他Webサイトを参考にする限りでは、URL指定の方法に問題があるらしいですが、アドバイスの程お願いします。

Python 3.6.5

from bs4 import BeautifulSoup
import requests
import pandas as pd
from google.colab import files


def get_search_results_df(keyword):
  columns = ['rank','title','url','affiliate_url']
  df = pd.DataFrame(columns=columns)
  html_doc = requests.get('https://www.google.co.jp/search?num=30&q=' +keyword).text
  soup = BeautifulSoup(html_doc, 'html.parser')  # BeautifulSoupの初期化
  tags = soup.find_all('h3',{'class':'r'})
  rank = 1
  for tag in tags:
    title = tag.text
    print(title)
    url = query_string_remove(tag.select("a")[0].get("href").replace("/url?q=",""))
    affiliate_url = get_a8_links(url) # 作成したコードの追加
    se = pd.Series([rank, title, url, affiliate_url], columns)
    df = df.append(se, ignore_index=True)
    rank += 1
  return df


def get_a8_links(url):
  html_doc = requests.get(url).text
  soup = BeautifulSoup(html_doc, 'html.parser')
  tags = soup.select("a")
  urls = ""
  for tag in tags:
    try:
      url = tag.get("href")
      if url.find(a8_link) > -1 :
        urls += url + "\n"
    except Exception as e:
      continue
  return urls


def query_string_remove(url):
  return url[:url.find('&')]


keyword = "EV charge"
search_results_df = get_search_results_df(keyword)
search_results_df.head(30)

from google.colab import files
filename = "filename.csv"
search_results_df.to_csv(filename, encoding = "utf-8-sig") # encoding指定しないと、エラーが発生します。
files.download(filename)

エラーメッセージ

EVgo: Electric Vehicle (EV) Charging Stations | EV Fast Charging
Charge!!!
PlugShare - EV Charging Station Map - Find a place to charge your ...News for EV charge


MissingSchema                             Traceback (most recent call last)
<ipython-input-20-932ef3fb8f3f> in <module>()
44 
45 keyword = "EV charge"
---> 46 search_results_df = get_search_results_df(keyword)
47 search_results_df.head(10)
48 

<ipython-input-20-932ef3fb8f3f> in get_search_results_df(keyword)
17     print(title)
18     url = query_string_remove(tag.select("a")[0].get("href").replace("/url?q=",""))
---> 19     affiliate_url = get_a8_links(url) # 作成したコードの追加
20     se = pd.Series([rank, title, url, affiliate_url], columns)
21     df = df.append(se, ignore_index=True)

<ipython-input-20-932ef3fb8f3f> in get_a8_links(url)
25 
26 def get_a8_links(url):
---> 27   html_doc = requests.get(url).text
28   soup = BeautifulSoup(html_doc, 'html.parser')
29   tags = soup.select("a")

/usr/local/lib/python3.6/dist-packages/requests/api.py in get(url, params, kwargs) 70  71     kwargs.setdefault('allow_redirects', True) ---> 72     return request('get', url, params=params, kwargs)
73 
74 

/usr/local/lib/python3.6/dist-packages/requests/api.py in request(method, url, kwargs) 56     # cases, and look like a memory leak in others. 57     with sessions.Session() as session: ---> 58         return session.request(method=method, url=url, kwargs)
59 
60 

/usr/local/lib/python3.6/dist-packages/requests/sessions.py in request(self, method, url, params, data, headers, cookies, files, auth, timeout, allow_redirects, proxies, hooks, stream, verify, cert, json)
492             hooks=hooks,
493         )
--> 494         prep = self.prepare_request(req)
495 
496         proxies = proxies or {}

/usr/local/lib/python3.6/dist-packages/requests/sessions.py in prepare_request(self, request)
435             auth=merge_setting(auth, self.auth),
436             cookies=merged_cookies,
--> 437             hooks=merge_hooks(request.hooks, self.hooks),
438         )
439         return p

/usr/local/lib/python3.6/dist-packages/requests/models.py in prepare(self, method, url, headers, files, data, params, auth, cookies, hooks, json)
303 
304         self.prepare_method(method)
--> 305         self.prepare_url(url, params)
306         self.prepare_headers(headers)
307         self.prepare_cookies(cookies)

/usr/local/lib/python3.6/dist-packages/requests/models.py in prepare_url(self, url, params)
377             error = error.format(to_native_string(url, 'utf8'))
378 
--> 379             raise MissingSchema(error)
380 
381         if not host:

MissingSchema: Invalid URL '/search?q=EV+charge': No schema supplied. Perhaps you meant http:///search?q=EV+charge?

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • quiqui

    2019/03/15 16:46

    すみません。入力するページを間違えてしまったようです。失礼しました。

    キャンセル

  • quiqui

    2019/03/15 17:22

    せっかくなので。
    あなたはすぐに実行できる環境があって、すぐにもその行で実際に実行されているurl変数が確認できるのになぜしないんですか? という回答は普通だと思いました。
    回答者がわざわざ実行するよりそちらの方がずっと解決への道に近いです。それをしないということは他の人(回答者)側で実行して調べてくれることを期待しているのでしょうか? と思ってしまいます。
    回答者に期待することは「解決する方法」であって「何かを教えてくれること」や「代わりに調べてくれること」ではないはずです。

    キャンセル

  • MacKimura

    2019/03/20 16:20 編集

    すみません、url変数は何?などとコメントいただいても漠然とした理解しかできないのです。
    ましてや、どうしようもないとか言われても挑発行為ですよね。。
    quiquiさんの理解とは裏腹に、私にとっては普通だと思えませんでした。
    対応例の方が理解が早いことは実感として理解しており、できればその方向性でアドバイスをお願いしたいと考えています。

    キャンセル

回答 1

+2

google翻訳
スキーマが指定されていません。

そのエラーが出た行の変数のナカミをチェックしてみよう

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2019/03/15 13:51

    y_waiwaiさん
    回答ありがとうございます。
    申し訳ないのですが、初心者につき具体的なチェック方法をご教示いただけますと助かります。

    尚、エラーメッセージ全文を追記しました。

    キャンセル

  • 2019/03/15 14:01

    わざわざエラーの行を出してくれてるんだから、そこの変数のナカミを見てみよう

    ---> 19 affiliate_url = get_a8_links(url) # 作成したコードの追加

    ここのurlはどういう内容でしょう

    キャンセル

  • 2019/03/15 14:19

    アドバイスいただいており恐縮ですが、
    それら一通り調べたものの理解できかねる程度の初学者ですので、
    試すようなコメントをいただいても困ってしまいます。
    (そもそもエラーを読み下せていればここで質問していません)

    キャンセル

  • 2019/03/15 14:24

    ここのurl変数の内容はどういうものでしょうか。
    #これさえ確認できないならどうしようもないですね、、

    キャンセル

  • 2019/03/15 14:29 編集

    どうしようもないとはどういう意味ですか?
    初学者が具体的にと、ワラをもつかむ思いでお願いしているのですが、、

    キャンセル

  • 2019/03/15 14:36

    色々勘違いしているようだけど、他人に聞いた所で何も解決しないですよ。
    自分の問題は、自分でしか解決できないのです。

    キャンセル

  • 2019/03/15 14:40 編集

    ???
    失礼ながら、ここで哲学や根性論を会話するつもりはありません。

    キャンセル

  • 2019/03/15 16:33

    ちなみに、クローズしておりません。
    失礼を承知で繰り返しますが、哲学や自分で考える「べき論」は要らないので、具体的な気づきを与えていただければ助かります。
    課題解決に向け、もがき悩んでいる気持ちをお察しいただければありがたいです。
    ちなみに、過去当方質問については、他回答者様の速やかな回答により、スムーズにクローズできております。(斯様に炎上気味に展開してしまったことに困惑しております。)

    キャンセル

  • 2019/03/15 16:36

    えーと、ここに限っては、べき論なんか言ってません。具体的な操作を答えてますが、あなたが実行しようとしないだけ、なんですが。

    まあ、あなたは解答を求めてるんでしょうけど、わたしは、解答を答えるつもりはありませんです。あしからず。

    キャンセル

  • 2019/03/15 16:42

    すみませんが、哲学はもう聞きたくありませんので回答を削除下さい。
    こちらからブロックできればしているのですが。
    ちなみに、あなたの4行の回答の中に日本語のロジックがねじれています。
    あなたの回答が各所で炎上、低評価を頻発させているようですが、どうやら理由が分かりました。
    ※ 他人の質問への回答に踏み込んで、ベストアンサーさせるまで悩ませる戦法。情けない。
    コードの前に、基本的な接遇マナーと日本語ロジックを鍛えて下さいね!!

    キャンセル

  • 2019/03/15 16:52

    運営さん、早くy_waiwaiさんのコメント削除をお願いします。

    キャンセル

同じタグがついた質問を見る

  • Python 3.x

    8901questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。