python サイト上で要素の中に特定のタグがない場合は空のリストを返し、ある場合は選択されているテキストを返す

Question

開いてくださりありがとうございます。
以下のHTMLの場合

<table>
 <tbody id="orderitemlist">
   <tr>
    <td>A</td>
    <td>B</td>
    <td>C</td>
    <td>
     <select>
      <option value="１"></option>
      <option value="２" selected="selected"></option>
      <option value="３"></option>
     </select>
    </td>
    <td>D</td>
    <td>E</td>
  </tr>
 </tbody>

<td>というタグが合計で6個あり、そのうちの一つに<select>があり、今は「２」が選ばれている状態なのですが、<td>の数だけ空のリストを返し、もしその中に<select>があれば選択されているテキストをリストに返すという場合どの様にすればよろしいでしょうか？

BeautifulSoupを使用してみようと思いましたがコードが思いつかず、

import select
selecteds4= [ ]
goodses = 取得した特定要素の数

 try:
    dropdown4 = browser.finds_element_by_css_selector('td select')
    select4 = Select(dropdown4)
    selected4 = select4.first_selected_option.text
except:
    selected4 = ' '

selecteds4.append(selected4)
n = 1
while True:
    if n != len(goodses):
        selecteds4.append('-')
        n +=1
        else:
            break

このようにしてみましたが、空のリストが他のリストと噛み合う様に返せず

[' -', '- ', '-', '２', '-', '-']と返したいが

[' ２', '- ', '-', '-', '-', '-']になってしまっています。

どうかご教授のほどよろしくお願い致します。

Answer 1

解決しませんでしたがひとまず解決済みとさせて頂きます。

Answer 2

HTML テキストは test.html ファイルに入っているとして、以下は BeautifulSoup を使う場合です。

from bs4 import BeautifulSoup

with open('test.html') as f:
    soup = BeautifulSoup(f.read(), 'html.parser')

lst = []
for i in  soup.select('tbody#orderitemlist > tr > td'):
    s = i.select_one('select > option[selected="selected"]')
    lst.append(s.get('value') if s else '-')

print(lst)      

#
['-', '-', '-', '２', '-', '-']

Comments

[hilowkey]

知識が足りず重ねて質問申し訳ありません。
test.htmlなどのファイルには落とし込まず
現在サイトから直接HTMLを調べながらプログラムしているのですが、こちらのコードだと一度test.htmlとしてファイル化させた方がいいということでしょうか？

[melian]

その場合は requests パッケージを使ってみてはどうでしょうか。一例として、以下の様にします。
import requests
r = requests.get('http://...')
soup = BeautifulSoup(r.content, 'html.parser')

[hilowkey]

requestsパッケージを使用したところ、こちらがWordpressのサイトでログインが必要な為なのか

url = browser.current_urlとした上で
session.get(url)、requests.get(url)
としても最初のログインが画面のところからsoup内でのurlが移動してくれずうまくいきませんでした。。

[melian]

ログイン処理が必要なのですね。そうなりますと Selenium でしょうか。

[hilowkey]

ログインが必要な場合soupだとできないことを知りませんでした。
申し訳ございません。
もう少しこのまま質問状態にさせて頂こうかと思いますm(_ _)m