質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.49%
Apache

Apacheは、Apache HTTP Serverの略で、最も人気の高いWebサーバソフトウェアの一つです。安定性が高いオープンソースソフトウェアとして商用サイトから自宅サーバまで、多くのプラットフォーム向けに開発・配布されています。サーバーソフトウェアの不具合(NCSA httpd)を修正するパッチ(a patch)を集積、一つ独立したソフトウェアとして開発されました。

Java

Javaは、1995年にサン・マイクロシステムズが開発したプログラミング言語です。表記法はC言語に似ていますが、既存のプログラミング言語の短所を踏まえていちから設計されており、最初からオブジェクト指向性を備えてデザインされています。セキュリティ面が強力であることや、ネットワーク環境での利用に向いていることが特徴です。Javaで作られたソフトウェアは基本的にいかなるプラットフォームでも作動します。

Q&A

解決済

1回答

2468閲覧

ApacheのHttpClientについて勉強したいのですが、初心者向けの本などないでしょうか?

risaito74

総合スコア44

Apache

Apacheは、Apache HTTP Serverの略で、最も人気の高いWebサーバソフトウェアの一つです。安定性が高いオープンソースソフトウェアとして商用サイトから自宅サーバまで、多くのプラットフォーム向けに開発・配布されています。サーバーソフトウェアの不具合(NCSA httpd)を修正するパッチ(a patch)を集積、一つ独立したソフトウェアとして開発されました。

Java

Javaは、1995年にサン・マイクロシステムズが開発したプログラミング言語です。表記法はC言語に似ていますが、既存のプログラミング言語の短所を踏まえていちから設計されており、最初からオブジェクト指向性を備えてデザインされています。セキュリティ面が強力であることや、ネットワーク環境での利用に向いていることが特徴です。Javaで作られたソフトウェアは基本的にいかなるプラットフォームでも作動します。

1グッド

0クリップ

投稿2016/11/15 08:52

JavaやPHPの言語の基本を最近習得した(パイザやプロゲートの入門はやり終えた)レベルのエンジニア初心者です。
仕事でJavaを使ってWebサイトに自動ログインし、formのPOST処理を行う案件を担当することになりました。

これまで、HttpURLConnectionクラスを使ってGET/POSTのテストを行っていましたが、ログインができないところでハマっている状態です。
(自分で作った最小構成のPHPと通信するものは上手くいくのですが、より本格的な本物のサイトが相手だと同じようにログインできない状態です)

ネットで様々な情報を調べているなかで下記のサイトを読み、HttpURLConnectionで実装するのはベターではない(悪手?)ではないかと感じました。

http://www.visards.co.jp/java/net/net06.html

そこで、このサイトにあるApacheのHttpClientを試してみたいと思っています。
ただ、これまでもそうでしたが、ネットの情報では、断片的だったり前提知識が省略されているため、なかなかネットの解説やサンプルだけではうまくできません。
(あっちこっちのサンプルを試してはうまく動かない日々です…)

そこで、体系的に学ぶ手段として高額でも良い本があれば入手したいと思い、質問させていただきました。

なお、「スッキリわかるJava入門」「同 実践編」「同 サーブレット&JSP入門」は購入済です。
(「サーブレット&JSP入門」はサーバーサイドでしたので、HTTPやformの基礎知識は役に立ちましたが、クライアントサイドからログイン、POSTするものを探しています)

抽象的な質問で恐縮ですが、ご助言のほど、よろしくお願い致します。

yodel👍を押しています

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

Javaでスクレイピングされるなら、下記がまとまっていました。
最後まで見てください。

「jsoup使い方メモ」
http://qiita.com/opengl-8080/items/d4864bbc335d1e99a2d7

ログインの方法のサンプルソース
出典:「JsoupでTwitterにログインしてツイート取得」http://blog.kikudai.com/2014/02/15/846/

java

1String ua = "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/32.0.1700.107 Safari/537.36"; 2 3try { 4 5 // 初回画面(hidden、トークンを取得) 6 Response res1 = Jsoup.connect("https://twitter.com/") 7 .userAgent(ua) 8 .execute(); 9 10 Elements elements = res1 11 .parse() 12 .getElementsByTag("input"); 13 14 // hiddenをMapにつめつめ 15 Map<String, String> hiddens = new HashMap<>(); 16 for (Element el : elements) { 17 if (StringUtil.equals(el.attr("type"), "hidden") 18 && StringUtil.isNotEmpty(el.attr("name"))) { 19 hiddens.put(el.attr("name"), el.attr("value")); 20 } 21 } 22 23 // ログイン 24 Response res2 = Jsoup.connect("https://twitter.com/sessions") 25 .userAgent(ua) 26 .cookies(res1.cookies()) 27 .data("session[username_or_email]", "アカウント") 28 .data("session[password]", "パスワード") 29 .data(hiddens) 30 .followRedirects(false) 31 .method(Connection.Method.POST) 32 .execute(); 33 34 Document timeline = Jsoup.connect("https://twitter.com/") 35 .userAgent(ua) 36 .cookies(res2.cookies()) 37 .get(); 38 39 System.out.println(timeline); 40 41} catch (IOException e) { 42 43 e.printStackTrace(); 44 45}

投稿2016/11/15 09:49

編集2016/11/15 10:03
nagaetty

総合スコア1106

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

risaito74

2016/11/15 10:47

サンプルのご提示までご丁寧にありがとうございます! 「Maven のセントラルリポジトリに jar がある。」でいきなり混乱するレベルですが、やはりMavenも理解しないといけないのだなと再確認しました。 まずは、Mavenとjsoupとご提示いただいたサンプルと…一歩ずつ理解できるように頑張っていきたいと思います。
nagaetty

2016/11/15 13:12

担当部分が上手く完了するといいですね。頑張ってください。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.49%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問