pythonでseleniumを使ってスクレイピング

Question

環境
CentOS7
python 3.6.3

実現したいこと
あるサイトの管理画面にログイン後、"レポート"というリンクをクリックしたい

find_element_by_link_textでなぜクリックできないのかご教示お願い致します

from selenium import webdriver
import pandas as pd
import requests
from bs4 import BeautifulSoup


driver = webdriver.PhantomJS()
driver.set_window_size(1024, 768)
.....
driver.find_element_by_link_text(u"レポート").click()

エラーメッセージ
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/root/.pyenv/versions/3.6.3/lib/python3.6/site-packages/selenium/webdriver/remote/webdriver.py", line 392, in find_element_by_link_text
    return self.find_element(by=By.LINK_TEXT, value=link_text)
  File "/root/.pyenv/versions/3.6.3/lib/python3.6/site-packages/selenium/webdriver/remote/webdriver.py", line 858, in find_element
    'value': value})['value']
  File "/root/.pyenv/versions/3.6.3/lib/python3.6/site-packages/selenium/webdriver/remote/webdriver.py", line 311, in execute
    self.error_handler.check_response(response)
  File "/root/.pyenv/versions/3.6.3/lib/python3.6/site-packages/selenium/webdriver/remote/errorhandler.py", line 237, in check_response
    raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.NoSuchElementException: Message: {"errorMessage":"Unable to find element with link text 'レポート'","request":{"headers":{"Accept":"application/json","Accept-Encoding":"identity","Connection":"close","Content-Length":"112","Content-Type":"application/json;charset=UTF-8","Host":"127.0.0.1:60297","User-Agent":"Python http auth"},"httpVersion":"1.1","method":"POST","post":"{\"using\": \"link text\", \"value\": \"\u30ec\u30dd\u30fc\u30c8\", \"sessionId\": \"43daa7d0-f44a-11e7-9bac-633dbf5ee480\"}","url":"/element","urlParsed":{"anchor":"","query":"","file":"element","directory":"/","path":"/element","relative":"/element","port":"","host":"","password":"","user":"","userInfo":"","authority":"","protocol":"","source":"/element","queryKey":{},"chunks":["element"]},"urlOriginal":"/session/43daa7d0-f44a-11e7-9bac-633dbf5ee480/element"}}
Screenshot: available via screen

ソース

<li><a href="/a/reports/monthly">レポート</a></li>

Comments

[Udomomo]

Seleniumが日本語の文字を正しく認識していない可能性もあります。一度Seleniumにスクリーンショットを撮らせて、文字が正しく読み取れているか確認してみるとよいかと思います。

Answer 1

selenium では list オブジェクトがクリックできないことが多いです。
その際は xpath を使い、

driver.find_element_by_xpath('//html/body/....../li').click()

としてやればクリックできます。
（サイト構造が変わると書き換えなければならないので面倒ですが。）