python seleniumのページ遷移について

Question

前提・実現したいこと

google chorme でpython selenium を使用して、webページをクローリングしようと考えています。

入りたいページのxptah・elementはこのような感じです。
【xpath】
/html/body/form/table/tbody/tr[1]/td[4]/a
【element】
<a href="javascript:doEdit('408843');">

	<script language="JavaScript">

<!-- var sStrFmt; sStrFmt=tableFormat('にんにく',33); document.write(sStrFmt); -->

</script>にんにく

	</a>

このため、私はこのようなcodeを作成しました（いろいろ作ってみましたが一番いいのかな？と思ったものをあげてみました、すいません）。
driver.find_element_by_xpath("//a[@herf = 'javascript:doEdit('408843');']").click();
ここで通常どおりxapthをそのまま引用しなかったのは、それだと違うelementも同一のxpathになってしまっていたからです。
また、遷移先のurlを直接指定していないのも、上記と同じように、違うelementだけれどもそれをクリックした先のurlが同じになっているからです。（例えば、元のページ（url末尾１）⇒遷移したいページ（末尾２）。でも、元ページに記載してあるほかのリンク先も遷移したいページとおなじ（末尾２）になっている。）

しかし、次のようなエラーが発生してしまいました。
selenium.common.exceptions.InvalidSelectorException: Message: invalid selector: Unable to locate an element with the xpath expression //a[@herf = 'javascript:doEdit('408843');'] because of the following error:
SyntaxError: Failed to execute 'evaluate' on 'Document': The string '//a[@herf = 'javascript:doEdit('408843');']' is not a valid XPath expression.

一応googleで検索したり、過去の質問でもよく載せていただいているhp(https://kurozumi.github.io/selenium-python/locating-elements.html)も見てみましたがよく分かりませんでした。

質問するにあたって情報が足りているかも判断がつかずに申し訳ないのですが、次のページを選択するためにはどうすればよいのかお知恵を貸していただけると助かります。どうぞよろしくお願いします。

Answer 1

そんなくどいことせず直にJSを実行してやればいいです。

driver.execute_script('javascript:doEdit(\'408843\');')

Comments

[yu--32]

コメントありがとうございました。当方の知識不足でこの要素がiframe内にあり操作領域を変更しなければいけないことを理解しておりませんでした。
iframe処理した後にアドバイスのとおり直接実行したらページ遷移することができました。大変助かりました。

Answer 2

タイプミスですね。指定したものが見つからないと言ってるのだから、最初に疑うべきはタイプミスです。
初心者の間違いの大半はタイプミスです。
@herf ⇒ @href

また、引用符がおかしいです。

"//a[@herf='javascript:doEdit('408843');']"
   ↓
"//a[@href=\"javascript:doEdit('408843');\"]"

Comments

[yu--32]

ご回答いただきありがとうございました。
私もまったく気づいておらずherfとなっておりました。大変失礼しました。
ただし、くどいようで大変申し訳ないのですが、やはり下記のNoSuchElementExceptionというエラーが出てきてしまいました。
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"xpath","selector":"//a[@href="javascript:doEdit('408843');"]"}
ですが、大切なご指摘ありがとうございました。

[yu--32]

追記ですいません。
https://teratail.com/questions/1711を参考に、待機時間を長く調整してみましたが、特段変わりませんでした。

[otn]

再現しませんね。質問のHTMLをコピペしてWindows10でやってみましたが、
>>> from selenium import webdriver
>>> driver = webdriver.Chrome()
>>> a=driver.find_element_by_xpath("//a[@href=\"javascript:doEdit('408843');\"]")
>>> a
<selenium.webdriver.remote.webelement.WebElement (session="1a5bf4e9bde287a4c112971cc5047b30", element="4d3379a0-006e-43d9-b678-a4f07988e867")>
>>> a.text
'にんにく'
>>>

この文の前に、input(”OK?") を入れて、完全にブラウザに画面が表示されてから、enterで次に進んでみるとか。それでだめなら、質問に書いてあるHTMLが間違っているということです。

[yu--32]

コメントありがとうございました。
こちらの知識不足で選択したい要素がiframe内にあるのが原因でした。（でも、iframe内の処理をした後にxpathを通してみてもうまくいきませんでした、xpathの使い方がうまくできていなかったのかもしれません）
長い間コメントしていただきありがとうございました。とても勉強になりました。

Answer 3

class名を指定して下記を実行いただくと画面遷移できるかと思います。

for i in find elements by class name("hoge")
 driver.get(i find element by tag name("a").get_attribute("href")) 

Comments

[yu--32]

ご回答ありがとうございました。そういった検索の方法があることを学ぶことができました。
ただ、知識不足であることも加えて、class名が特定できずに指定することができませんでした。いままでは、class名やid名がついているelementをとることが多く、その場合だとできるのですが、
<a href="javascript:doEdit('408843');">だけですとどのように処理すればよいのか把握できていない状態です。

[john_doe_]

<a href="javascript:doEdit('408843');">が含まれているclassがあるはずです。
おそらく、<a href="javascript:doEdit('408843');">の上に記載されておるかと思います。

ご検討されている通り、<a href="javascript:doEdit('408843');">だけを実行されたいのであれば、shiraiさんのご提案内容が的確かと存じます。

[yu--32]

コメントありがとうございます。
知識不足で選択したい要素がiframe内にございました、大変失礼しました。
class名は上層のクラス名を使用すればいいのですね、とても勉強になりました。ありがとうございました。

Answer 4

SyntaxError: Failed to execute 'evaluate' on 'Document': The string '//a[@herf = 'javascript:doEdit('408843');']' is not a valid XPath expression.
は 出なくなると思います

driver.find_element_by_xpath("//a[@herf='javascript:doEdit(\"408843\");']").click()

Comments

[yu--32]

コメントありがとうございます。おっしゃるように、コードを
driver.find_element_by_xpath("//a[@herf='javascript:doEdit(\"408843\");']").click()
のように書き直したところ、上記のエラーがでなくなりました。ありがとうございます。
ただし、かわりのエラーはどうしてもでてきてしまうので、もしお分かりになる方いらっしゃいましたらどうぞよろしくお願いいたします。
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"xpath","selector":"//a[@herf='javascript:doEdit("408843");']"}
(Session info: chrome=78.0.3904.108)