Jsoupでログイン後の専用ページにあるformを模倣してPOSTしてもデータが更新されない

Question

JsoupでTwitterにログインしてツイート取得
以前教えていただいたこちらのサイトを参考に、JsoupでログインしてformデータをPOST更新するプログラムを作成しています。
ログインして、ログイン後の各ページへ遷移してページのHTMLを取得することまではできました。
該当ページのformデータを抽出して、任意のデータを変更し、POSTしてデータを更新したいのですが、POSTがうまく実行できず、データが反映されません。

		String ua = "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.71 Safari/537.36 ";

		// ログイン画面取得
		Response res1 = Jsoup.connect("http://（とあるサイト）/")
				.userAgent(ua)
				.timeout(0)
				.execute();

		Document doc = res1.parse();
	    //System.out.println(doc);

		//ログインPOST実行
		Response res2 = Jsoup.connect("http://（ログイン用URL）")
				.userAgent(ua)
				.timeout(0)
				.cookies(res1.cookies())
				.data("txt_account", "（ID）")
				.data("txt_password", "（パスワード）")
				.data("chk_save", "")
				.data("login", "ログイン")
				.method(Method.POST)
				.execute();

	    // イベント更新ページの表示
		Response res3 = Jsoup.connect("http://（イベント登録用ページ）")
				.userAgent(ua)
				.timeout(0)
				.cookies(res2.cookies())
				.method(Method.GET)
				.execute();

		doc = res3.parse();

	    //***** イベント更新用form情報の取得 *****
		Elements elements = new Elements();

		//***** start_yearの取得 *****
	    elements = doc.getElementsByAttributeValue("name","start_year");
	    String startYear = new String();
        for (Element element : elements) {
            //System.out.println(element.outerHtml());
            startYear = element.outerHtml();
        }
        //正規表現で「value=\"....\" selected」を検索
		startYear = getPatternMatchFind(startYear,"value=\"....\" selected");
		//valueの抽出（前後の切り落とし）
		startYear = getSplitFrontBack(startYear, "value=\"", "\" selected");
		//post形式に整形
		startYear = "start_year=" + startYear;
        System.out.println(startYear);

		//***** start_monthの取得 *****
	    elements = doc.getElementsByAttributeValue("name","start_month");
	    String startMonth = new String();
        for (Element element : elements) {
            //System.out.println(element.outerHtml());
        	startMonth = element.outerHtml();
        }
        //正規表現で「value=\"..\" selected」を検索
        startMonth = getPatternMatchFind(startMonth,"value=\"..\" selected");
		//valueの抽出（前後の切り落とし）
		startMonth = getSplitFrontBack(startMonth, "value=\"", "\" selected");
		//post形式に整形
		startMonth = "start_month=" + startMonth;
        System.out.println(startMonth);

/***** 中略 *****/

        //***** イベントデータ更新POST *****
		Response res4 = Jsoup.connect("http://（POSTするURL）")
				.userAgent(ua)
				.timeout(0)
				.cookies(res2.cookies())
				.data("start_year", startYear)
				.data("start_month", startMonth)
				.data("start_day", startDay)
				/***** （残りのdataは省略） *****/
	    		.followRedirects(false)
				.method(Method.POST)
				.execute();

		doc = res4.parse();
	    System.out.println(doc);

	    //POST後の更新ページをGET
        Response res5 = Jsoup.connect("http://（イベント登録用ページ）")
				.userAgent(ua)
				.timeout(0)
				.cookies(res2.cookies())
				.method(Method.GET)
				.execute();

		doc = res5.parse();
	    System.out.println(doc);

res4.parse()の出力結果は空のhtmlになっています。このことからPOST処理が失敗しているのではないかと考えています。
また、正しくPOSTできていればres5.parse()の出力結果で変更後のデータが確認できるはずですが、変更はされていませんでした。
（念のためブラウザから手動ログインでも確認しましたが、データは更新されていませんでした）

POSTする各属性と値（name=value）について抜けはないか？nameの表記ミスはないか？この点は確認しました。

このプログラムでPOSTが失敗する原因と対策について、ご助言いただけないでしょうか？
よろしくお願いいたします。

Answer 1

すみません、単純な勘違い・ミスでした！
.data("start_year", startYear)
において変数startYearの値を"start_year=2016"としていますが、ここが間違いで、data()の第二引数に入れる値は「value値のみ」でした。
したがって、上記プログラムでは"start_year=start_year=2016"がPOSTされてしまうため、エラーとなっていました。
startYearの値を"2016"とし、他のPOST用変数も同様に修正したところ、無事問題なくPOSTによるデータ登録ができました！
ご協力ご助言いただいた皆様、ありがとうございました！

Answer 2

POSTのサンプルは、下記のサイトが参考になるかと思います。

http://t-horikiri.hatenablog.jp/entry/20120308/1331182734

Timeout(0)が厳しいかと思いますので、下記で試してみてはいかがでしょうか？

.timeout(10 * 1000)

Comments

[risaito74]

助言ありがとうございます！明日職場で試してみたいと思います！
なお、下記Jsoupサイトには「A timeout of zero is treated as an infinite timeout.」とあるのでtimeout(0)は無制限で待ってくれるのかと思っていましたが、まずは試してみたいと思います。
https://jsoup.org/apidocs/org/jsoup/Connection.html#timeout-int-

[nagaetty]

ご指摘の通り無制限かもしれません。
後は、cookiesの値で状態管理している可能性があるので正しいcookiesの値を返却しているかご確認ください。わかりやすいのは、wiresharkというツールでサーバとのIN/OUTを確認して、ブラウザと作成したプログラムで比較するというのが一番良かったりします。（ただしSSLだと無理ですが）

[risaito74]

度々ありがとうございます！cookiesも確認してみたいと思います。

[risaito74]

ご助言いただいたtimeout(10 * 1000)など、タイムアウト時間を多めに設定してみましたが、こちらは挙動に変化はありませんでした。
また、各resのcookiesを確認してみたところ、ログイン処理時のres2のみクッキーにid,パス、セッションIDが入っていることがわかりました。こちらはres2のクッキーを使わなければステートフルにはならないということが理解できました。ありがとうございます！
問題の解決には至っていませんが、引き続き調べていきたいと思います。