selenium.webdriver.remote.webelement.WebElementの原因と解決策

###実現したいこと
Python及びseleniumで画面を操作しBeautifulSoupで解析した画面の値を取得したいと思っています。
対象は、BeautifulSoupで解析した下記のbタグで囲まれた「抽出対象文字」になります。

<html lang="en">
 <body style="">
  <div class="body">
   <table border="0" cellpadding="0" cellspacing="0" width="1124">
    <tbody>
     <tr>
      <td align="left" valign="top" width="48%">
      </td>
      <td width="2%">
      </td>
      <td align="right" valign="top" width="50%">
       <span id="priceListAndBoard">
        <span id="outlist">
         <id="psform" method="post" name="psform" target="">
          <table border="0" cellpadding="0" cellspacing="0" width="100%">
           <tbody>
            <tr>
            </tr>
            <tr>
            </tr>
            <tr>
             <td bgcolor="#ffffff" rowspan="2" valign="top" width="260">
             </td>
             <td rowspan="2">
             </td>
             <td valign="top" width="300">
              <table border="0" cellpadding="1" cellspacing="0" class="chart" width="100%">
               <tbody>
                <tr>
                 <td align="right" bgcolor="#ffffff" valign="middle" width="24%">
                 </td>
                 <td align="right" bgcolor="#ffffff" valign="middle" width="48%">
                  <b>
                   抽出対象文字
                  </b>
                 </td>
                </tr>
               </tbody>
              </table>
             </td>
            </tr>
           </tbody>
          </table>
         </form>
        </span>
       </span>
      </td>
     </tr>
    </tbody>
   </table>
  </div>
 </body>
</html>

発生している問題・エラーメッセージ

BeautifulSoupで解析しxpathで指定したオブジェクトを抽出したところ画面に表示されている値ではなく「selenium.webdriver.remote.webelement.WebElement (session="", element="")>」が表示されてしまいます。

該当のソースコード

#BeautifulSoupで解析する
source2 = BeautifulSoup(driver.page_source, "html.parser").prettify()
#xpathで対象の値を抽出する
a = driver.find_element_by_xpath("/html/body/div[1]/table/tbody/tr/td[3]/span/span/form/table/tbody/tr[3]/td[3]/table/tbody/tr[1]/td[2]/b")

試したこと

print(table.get_attribute('b'))での取得を試みましたが、エラーになってしまいました。
解決方法のご教授をお願い致します。

行動規範の内容に同意します

回答1件

ベストアンサー

コメントに、

BeautifulSoupで解析する

と書いてありますが、実際には、driver.find_element_by_xpathを使っているので、BeautifulSoupじゃなくて、Seleniumの機能ですね。

返ってくる値は、Seleniumのエレメント（タグ）なので、テキストが欲しければ、a.textです。

投稿2021/06/29 13:18

otn

総合スコア84555

jun1248

2021/06/30 09:32

ご回答及びご指摘ありがとうございます。ご教授頂きました通り下記で実行したところ「StaleElementReferenceException」になりました。原因等を調査してみます。 print(a.text)

otn

2021/06/30 09:45

そのエラーは、a を取得してからページ遷移してしまったと言うことだと思います。 a=driver.find_element_by_xpath(～～) の直後で print(a.text) してないのでは？エレメントの参照の際は、今まさに表示されているページのエレメントしか参照できません。

jun1248

2021/06/30 10:18

ご回答いただきありがとうございます。「StaleElementReferenceException」の件について自己解決できました。 driver.implicitly_wait()で待機時間を設け複数回テスト実施を行ったところ全て取得できました。また、コメントについてもご指摘の通り修正いたします。ありがとうございました。

行動規範の内容に同意します