GetAsync処理時のメッセージの長さが制限の解消方法について

Question

Windowsクライアントアプリで下記の様な現象が発生してしまったのですが、
どのような対応手段がありますでしょうか。

OS ：Windows10
開発環境：VisualStudio2017
言語 ：C#
ﾌﾚｰﾑﾜｰｸ ：WPF

ソース(抜粋)

HttpClient client = HttpClientFactory.GetForHost(new Uri(url));
var response = client.GetAsync((url)); ← エラー発生箇所

エラー内容
接続が切断されました: メッセージの長さが制限を超えています。

調べてみて、下記の様に対応してみたのですが、現象は改善されませんでした。
var response = client.GetAsync((url));

↓に修正

var response = client.GetAsync((url), HttpCompletionOption.ResponseHeadersRead);

本現象を解消するにあたって、どの様な手段がありますでしょうか。
どうかお知恵の拝借の程をお願いします。

Comments

[tamoto]

そのような形式の HttpClientFactory は見覚えがないのですが、もしかして独自実装ですか？

[MTTK]

返信が大変遅くなり、申し訳ございません。

そうです。
独自実装です。
この様に命名したクラス名です。

Answer 1

英文のエラーメッセージ "The underlying connection was closed: The message length limit was exceeded." でググって調べただけですので未検証・未確認ですが（ハズレかもしれませんが）・・・

HttpClient より前の HttpWebResponse でも同様な問題が起こっていたそうで、その時は応答ヘッダが 64KB を超えるとそのエラーメッセージの例外が出たという話があります。

例えば下記。ググると他にもいろいろヒットします。

WebException: "The message length limit was exceeded"
http://faithlife.codes/blog/2012/01/webexception-the-message-limit-length-was-exceeded/

その記事に書いてある解決策は HttpWebRequest の MaximumResponseHeadersLength プロパティを -1 (無制限) に設定することだそうです。

できれば HttpClient を HttpWebRequest / HttpWebResponse に代えて、HttpWebRequest の MaximumResponseHeadersLength プロパティを -1 (無制限) に設定して試してみて、結果を教えていただけると幸いです。

Comments

[MTTK]

提示して頂いた現象が私が困っている現象と一致しているので、
教えて下さっている情報を元に調べてみたいと思います。

[退会済みユーザー]

その前に、hihijiji さんが提案されているように Fiddler で要求・応答をキャプチャしてみるのを先にした方がよさそうです。

Fiddler で調べることができるのは、(1) アプリから要求がサーバーに出て行っているか、(2) 要求ヘッダとコンテンツの内容は期待通りか、(3) サーバーから応答が返ってきているか、(4) 応答ヘッダとコンテンツの内容は期待通りかです。これで問題がどこにあるのか大体の見当がつくはずです。上のレスで書いた応答ヘッダのサイズも (4) を見れば分かります。

[MTTK]

私の方の記述が足りていませんでした。
Fiddlerで確認した結果、ヘッダーが70Kあり、提示してくださった現象の条件と一致する点が多いため、調べてみる事にしました。

補足、ありがとうございます。

[退会済みユーザー]

> Fiddlerで確認した結果、ヘッダーが70Kあり

情報をありがとうございました。上のレスで書きましたように、HttpClient を HttpWebRequest / HttpWebResponse に代えて、HttpWebRequest の MaximumResponseHeadersLength プロパティを -1 (無制限) に設定して試してみて、結果を教えていただけると幸いです。

Answer 2

こんにちは。
これは SurferOnWww さんの回答を読んだ上での回答です。

HttpClient の動作をカスタマイズするには HttpClientHandler クラスのインスタンスを作り、それを HttpClient のコンストラクタに渡す必要があります。
この HttpClientHandler に MaxResponseHeadersLength プロパティがあるので、これを変更することで問題が解決しませんでしょうか。

var handler = new HttpClientHandler { MaxResponseHeaderLength = int.MaxValue };
var client = new HttpClient(handler);

// ...

Comments

[退会済みユーザー]

MaxResponseHeadersLength プロパティが使えるのは .NET 4.7.1 以上のようですね。HttpWebRequest / HttpWebResponse で起こっていた問題に対応できないことを指摘されて追加したのでしょうか。

[tamoto]

確かに API 追加は net471 以降のようでした。
netstandard/netcoreapp では初期の初期からサポートしていたので忘れていました……netstandard1.6 がサポートしているので net462 でも動かせますね。

[MTTK]

.netのバージョンアップする事で対応が行えました。
本当に困っていたので、非常に助かりました。

ただ現状は.Net461での動作もありえる為、
.Netのバージョンを確認して、分岐させて最終的には対応を行おうと思います。
そうなるとSurferOnWwwさんが回答を下さっている形で対応を行わなくてはいけないので、
それはこれから行っていきたいと思います。

[tamoto]

HttpClient の生成コード部分を netstandard2.0 ライブラリに切り出しておけば net461 でも同じように動作させられますよ。
ベストアンサーは根本原因を突き止めた SurferOnWww さんに付けていただきたかったですが。

Answer 3

通信の場合は相手があるので、クライアントアプリ側だけでのデバッグは大変です。
そんな時は、ローカルプロクシを使って通信をキャプチャすると良いです。
HTTP、HTTPS通信の場合は、Fiddlerが便利です。

Comments

[MTTK]

ありがとうございます。
教えて下さったFiddlerを使用して、調べてみたいと思います。