ブラウザを操作する（ログインに必要なIDやパスワードを自動入力）ようなJavaのAPIにはどんなものがありますか？

Question

前提・実現したいこと

webブラウザから新聞を開き、ログインし、任意のキーワード検索を行い、ヒットするタイトルとURLをテキストファイルにInputし、excelにOutputするプログラムを作ろうと考えています。

現在は、Desktopクラスを用いて指定のブラウザを開く単体のプログラムを作ってみました。
次に、開いたブラウザのログイン画面でIDとパスワードを自動で入力を行い、ログインをするまでを実装したいと考えています。

調べたこと

WebDriverやSeleniumなどが該当しそうだとは思ったのですが、
これらを導入するしか方法はないのでしょうか？
お勉強のために、JavaのAPIパッケージをインポートするなどして構造を理解しながら実装をしたいのですが、、、
ご意見ください。

Answer 1

WebDriverやSelenium

これら、1つでは？機能的にはSeleniumのWebDriverです。
それに、WebDriverもJavaのAPIの１つです。
「JavaのAPIパッケージをインポートする」というご自身の要件に合致してるように見受けられます。

ただ、基本的には自動テストを想定して作られたパッケージであるはずです。
スクレイピング目的で利用したいのでしたら重々ご注意ください。

Comments

[kjrk]

ありがとうございます。
スクレイピングを目的にしているので注意事項を確認してから取り組みます。

[kjrk]

こちらが注意事項について、よく纏まっていそうでしたので、
共有させて頂きます。
https://qiita.com/n_oshiumi/items/b4efd1f40ec0a1b77376

[m.ts10806]

それが全てとは限りません。
最近あった質問にも回答寄せられています。（私も回答しています）
https://teratail.com/questions/313865